Scala Spark将PairRDD转换为数据帧_Scala_Apache Spark_Apache Spark Sql_Spark Dataframe

Scala Spark将PairRDD转换为数据帧

scala apache-spark

Scala Spark将PairRDD转换为数据帧,scala,apache-spark,apache-spark-sql,spark-dataframe,Scala,Apache Spark,Apache Spark Sql,Spark Dataframe,如何转换以下类型的RDD对 joinResult res16: org.apache.spark.api.java.JavaPairRDD[com.vividsolutions.jts.geom.Polygon,java.util.HashSet[com.vividsolutions.jts.geom.Polygon]] = org.apache.spark.api.java.JavaPairRDD@264b550 到数据帧？不会像那样有效。您看到这是否适合您了吗？我可以不使用collec

如何转换以下类型的RDD对

joinResult
res16: org.apache.spark.api.java.JavaPairRDD[com.vividsolutions.jts.geom.Polygon,java.util.HashSet[com.vividsolutions.jts.geom.Polygon]] = org.apache.spark.api.java.JavaPairRDD@264b550

到数据帧？

不会像

那样有效。您看到这是否适合您了吗？我可以不使用collect吗？您可以在案例中使用

pairdd.rdd

代替标题

joinResult.rdd.toDF.show

这是朝正确方向迈出的一步，但会因为缺少编码器而失败。

joinResult.toDF().show