Apache spark JdbcRDD如何映射到键值对RDD
我有以下代码:Apache spark JdbcRDD如何映射到键值对RDD,apache-spark,rdd,Apache Spark,Rdd,我有以下代码: val myRDD = new JdbcRDD( sc, () => r => (r.getString("city"),r.getString("town"),r.getInt("count"))) 因为我需要按city和town进行约简以得到count的和,所以我需要创建一个密钥对RDD,其中city和town是密钥,count是值。我试过val pairdd=myRDD.maptp=>tp.\u 1,tp.\u 2,tp.\u 8,但不起作用。谢谢 您使用的是
val myRDD = new JdbcRDD( sc, () => r =>
(r.getString("city"),r.getString("town"),r.getInt("count")))
因为我需要按city和town进行约简以得到count的和,所以我需要创建一个密钥对RDD,其中city和town是密钥,count是值。我试过val pairdd=myRDD.maptp=>tp.\u 1,tp.\u 2,tp.\u 8,但不起作用。谢谢 您使用的是什么版本的Spark?你能详细解释一下你的意思吗?你能纠正你的代码吗?它甚至无法编译:谢谢你们,我发现它是Eclipse编译问题,没有提示,所以我认为它不是一个键值对RDD。