Python 无法创建Spark会话
这可能是一个天真的问题 当我从下面的代码中使用pyspark创建spark上下文时,运行后,应用程序的状态开始出现在spark仪表板上的“running application”下Python 无法创建Spark会话,python,apache-spark,pyspark,apache-toree,Python,Apache Spark,Pyspark,Apache Toree,这可能是一个天真的问题 当我从下面的代码中使用pyspark创建spark上下文时,运行后,应用程序的状态开始出现在spark仪表板上的“running application”下 conf=pyspark.SparkConf().setAppName('blah').setMaster('spark://:8000')) sc=pyspark.SparkContext(conf=conf) 但当我从下面的代码片段创建spark会话时,spark dashboard上并没有显示应用程序的状态
conf=pyspark.SparkConf().setAppName('blah').setMaster('spark://:8000'))
sc=pyspark.SparkContext(conf=conf)
但当我从下面的代码片段创建spark会话时,spark dashboard上并没有显示应用程序的状态
spark=SparkSession.builder
.appName('blah blah')
.master('spark://:8000')
.getOrCreate()
我不知道为什么会这样,因为我是Spark的新手,所以请帮忙。只解决了一个愚蠢的错误,应该是SparkSession.builder.master('Spark://:8000')。appName('blah blah')。getOrCreate()只解决了一个愚蠢的错误,应该是SparkSession.builder.master('Spark://:8000')。appName('blah blah')).getOrCreate()