Pyspark '；数据帧'；对象没有属性'_JRDU反序列化器'；？_Pyspark

Pyspark '；数据帧'；对象没有属性'_JRDU反序列化器'；？

pyspark

Pyspark '；数据帧'；对象没有属性'_JRDU反序列化器'；？,pyspark,Pyspark,空RDD没有反序列化程序，这会妨碍将不同的数据集附加到一个数据集上。我希望像pandas（df.append（new_df））方法一样，将我的数据集相互附加。有什么解决办法吗 df2 = spark.sparkContext.emptyRDD() print(df2) df2=df2.union(df_ptvb).cache() 最后一条语句导致错误。我有一个名为df_ptvb的有效RDD，我想将它附加到我的空数据集中。我计划在管道上进一步锁定更多的数据集

空RDD没有反序列化程序，这会妨碍将不同的数据集附加到一个数据集上。我希望像pandas（df.append（new_df））方法一样，将我的数据集相互附加。有什么解决办法吗

df2 = spark.sparkContext.emptyRDD()
print(df2)

df2=df2.union(df_ptvb).cache()

最后一条语句导致错误。我有一个名为df_ptvb的有效RDD，我想将它附加到我的空数据集中。我计划在管道上进一步锁定更多的数据集