Fatal编程技术网
  • scala/
  • Pivot spark scala数据帧

Pivot spark scala数据帧

scala apache-spark

Pivot spark scala数据帧,scala,apache-spark,apache-spark-1.6,Scala,Apache Spark,Apache Spark 1.6,我试图在scala spark中使用pivot方法 val dfOutput = df_input.groupBy("memberlogin").pivot("country_group2").count() 然而，尽管在eclipse中创建jar时没有任何遵从性错误， 在spark中执行时，其给出的错误为-- 线程“main”java.lang.NoSuchMethodError中出现异常： org.apache.spark.sql.GroupedData.pivot(Ljava/lang

我试图在scala spark中使用pivot方法

val dfOutput =  df_input.groupBy("memberlogin").pivot("country_group2").count()
然而，尽管在eclipse中创建jar时没有任何遵从性错误， 在spark中执行时，其给出的错误为--
线程“main”java.lang.NoSuchMethodError中出现异常：

org.apache.spark.sql.GroupedData.pivot(Ljava/lang/String;)Lorg/apache/spark/sql/GroupedData;
我已导入所需的库

import org.apache.spark.sql.GroupedData
import org.apache.spark.sql.functions
而且

import sqlContext.implicits._
几乎没有其他线程声称

它不起作用，无法理解，有人能帮助或指引方向吗

数据透视功能是在
Spark 1.6
中添加的，它可以使用
DataFrame
（使用Scala、Java或Python）创建数据透视表。

数据透视功能是在
Spark 1.6
中添加的，它可以使用
DataFrame
（使用Scala、Java或Python）创建数据透视表.

Spark 1.6中引入的旋转功能请查看此文档。检查
API

Spark 1.6中引入的旋转功能请检查此文档。检查
API