Python 在SPARK上将JSON对象转换为数据帧

我在IBMBlueMix上使用ApacheSpark上的Python笔记本收到JSON格式的推特流。我想将JSON对象转换为数据帧。我发现的最接近的东西是：

json_obj={“tweet”：“嘿，伙计”，“name”：“Alan”}模拟示例

tweetsDF=sqlContext.read.json（“文件路径”）

---

现在，我不想加载文件。我只想把这个JSON变量转换成数据帧格式。这样我就可以将其应用于tweets变量。你知道怎么做吗？谢谢大家!

首先将JSON对象转换为RDD[String]，然后应用'sqlContext.read.JSON'。下面是Scala中的示例代码

val json_obj = sc.parallelize(Array("""{"tweet": "hey man", "name": "Alan"}""", """{"tweet": "what's up", "name": "Bertha"}"""))
val tweetsDF = sqlContext.read.json(json_obj)
tweetsDF.show()
//+------+---------+
//|  name|    tweet|
//+------+---------+
//|  Alan|  hey man|
//|Bertha|what's up|
//+------+---------+

---

首先将JSON对象转换为RDD[String]，然后应用'sqlContext.read.JSON'。下面是Scala中的示例代码

val json_obj = sc.parallelize(Array("""{"tweet": "hey man", "name": "Alan"}""", """{"tweet": "what's up", "name": "Bertha"}"""))
val tweetsDF = sqlContext.read.json(json_obj)
tweetsDF.show()
//+------+---------+
//|  name|    tweet|
//+------+---------+
//|  Alan|  hey man|
//|Bertha|what's up|
//+------+---------+