Python py4j.protocol.Py4JJavaError java.lang.NoSuchFieldError:java_9_Python_Python 3.x_Pyspark_Py4j

Python py4j.protocol.Py4JJavaError java.lang.NoSuchFieldError:java_9

python python-3.x pyspark

Python py4j.protocol.Py4JJavaError java.lang.NoSuchFieldError:java_9,python,python-3.x,pyspark,py4j,Python,Python 3.x,Pyspark,Py4j,我试图在本地执行spark submit spark-submit --master local --executor-cores 1 --queue default --deploy-mode client test.py 但是得到了错误 py4j.protocol.Py4JJavaError:调用时出错 None.org.apache.spark.api.java.JavaSparkContext.： java.lang.NoSuchFieldError:java_9 我使用的是Pytho

我试图在本地执行spark submit

spark-submit --master local --executor-cores 1 --queue default --deploy-mode client test.py

但是得到了错误

py4j.protocol.Py4JJavaError:调用时出错 None.org.apache.spark.api.java.JavaSparkContext.： java.lang.NoSuchFieldError:java_9

我使用的是Python3.8和pyspark 3.0.1，对于java，我打开了JDK 1.8，在尝试通过sc.\U jvm调用本地jar时遇到了相同的错误。在我的例子中，我通过恢复到pyspark（2.4.3）的早期版本，成功地实现了这一点

我也在使用Python3.6.8——我在Python3.8的pyspark 3.0.1中遇到了一个不同的错误