Pyspark Py4JJavaError:调用o6756.parquet时出错

Pyspark Py4JJavaError:调用o6756.parquet时出错,pyspark,apache-spark-sql,pyspark-dataframes,Pyspark,Apache Spark Sql,Pyspark Dataframes,在以拼花格式将数据帧写入s3时,我遇到以下错误: Py4JJavaError: An error occurred while calling o6756.parquet. 但是找不到任何解决方案来纠正此问题。实际上,我在从列表中删除元素时,udf中出现了一个错误,它超出了范围,因为我正在按索引删除元素,所以,为了解决这个问题,我必须对列表进行deepcopy,然后开始删除元素。可能会添加以下行错误??

在以拼花格式将数据帧写入s3时,我遇到以下错误:

Py4JJavaError: An error occurred while calling o6756.parquet.

但是找不到任何解决方案来纠正此问题。

实际上,我在从列表中删除元素时,udf中出现了一个错误,它超出了范围,因为我正在按索引删除元素,所以,为了解决这个问题,我必须对列表进行deepcopy,然后开始删除元素。

可能会添加以下行错误??