Spark streaming 什么';Spark 2.2和2.3的结构化流媒体有什么不同?

Spark streaming 什么';Spark 2.2和2.3的结构化流媒体有什么不同?,spark-streaming,Spark Streaming,我在Spark 2.3的发行说明中看到了结构化流媒体的发布,但我知道它已经存在了一段时间。由于某些依赖关系,我需要在系统实现中使用Spark 2.2,但我还想开始将面向批处理的工作转移到流式处理范例中 没有Spark 2.3,我还缺少什么重要的东西吗?或者这只是结构化流媒体成为“官方”而不是实验性的版本吗?在一次本地会议上,我能够与“知情人士”交谈,他(稍微不太正式)的回答是,你可以在2.2中使用结构化流媒体,但是,如果您试图在生产环境中使用,那么结果不太稳定(即有缺陷),您不应该感到惊讶 他进

我在Spark 2.3的发行说明中看到了结构化流媒体的发布,但我知道它已经存在了一段时间。由于某些依赖关系,我需要在系统实现中使用Spark 2.2,但我还想开始将面向批处理的工作转移到流式处理范例中


没有Spark 2.3,我还缺少什么重要的东西吗?或者这只是结构化流媒体成为“官方”而不是实验性的版本吗?

在一次本地会议上,我能够与“知情人士”交谈,他(稍微不太正式)的回答是,你可以在2.2中使用结构化流媒体,但是,如果您试图在生产环境中使用,那么结果不太稳定(即有缺陷),您不应该感到惊讶

他进一步指出,即使是Spark 2.3也存在某些情况,某些边缘情况可能会很容易导致问题,并且在这一过程中有很多修复程序,可以使其在2.4中更加稳定。所以我自己要注意的是,我应该尝试在生产中使用它,直到我的各种其他依赖项允许Spark 2.4。很遗憾,因为我认为这种新方法非常优雅