Apache spark 库伯内特斯+；火花作业未进行/卡住_Apache Spark_Kubernetes_Pyspark

Apache spark 库伯内特斯+；火花作业未进行/卡住

apache-spark kubernetes pyspark

Apache spark 库伯内特斯+；火花作业未进行/卡住,apache-spark,kubernetes,pyspark,Apache Spark,Kubernetes,Pyspark,我正在尝试在Kubernetes集群上运行pyspark代码应用程序流程应该是：读取数据->缓存->执行多个操作，但作业根本没有进展。它卡在日志消息上： WatchConnectionManager: The resource version -some number- no longer exists. Scheduling a reconnect. 可能是什么问题？看起来像是Spark内部的问题，应该在版本3.0.2、3.1.0中修复嗨，Sahil，看看这一点可能有助于从社区获得答案：

我正在尝试在Kubernetes集群上运行pyspark代码

应用程序流程应该是：读取数据->缓存->执行多个操作，但作业根本没有进展。它卡在日志消息上：

WatchConnectionManager: The resource version -some number- no longer exists. Scheduling a reconnect.

可能是什么问题？

看起来像是Spark内部的问题，应该在版本3.0.2、3.1.0中修复

嗨，Sahil，看看这一点可能有助于从社区获得答案：