Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 可以在集群模式下使用spark sumit运行python代码吗?_Apache Spark_Pyspark - Fatal编程技术网

Apache spark 可以在集群模式下使用spark sumit运行python代码吗?

Apache spark 可以在集群模式下使用spark sumit运行python代码吗?,apache-spark,pyspark,Apache Spark,Pyspark,我可以在本地模式下使用spark submit运行python代码,可以在集群模式下运行python代码吗?有人试过吗 请告知。这是可能的,验证Python路径设置是否正确很重要,但它应该可以正常工作。谢谢Holden,但我在下面阅读了关于群集模式下Python的链接,他们提到我们不能在群集模式下使用Python,但听说有人说他们可以在Hortonworks的集群模式下运行pyhon,我不确定,我正在使用IBMiginsight。你能给我一张清晰的图片吗?链接:下面的链接指的是纱线群集模式与纱线

我可以在本地模式下使用spark submit运行python代码,可以在集群模式下运行python代码吗?有人试过吗


请告知。

这是可能的,验证Python路径设置是否正确很重要,但它应该可以正常工作。

谢谢Holden,但我在下面阅读了关于群集模式下Python的链接,他们提到我们不能在群集模式下使用Python,但听说有人说他们可以在Hortonworks的集群模式下运行pyhon,我不确定,我正在使用IBMiginsight。你能给我一张清晰的图片吗?链接:下面的链接指的是纱线群集模式与纱线客户端模式,对不起,我以为你是问在本地机器上运行群集与在本地机器上运行群集,而不是在两个不同的纱线部署选项上运行群集。@tkumaran我通常认为的“群集模式”在Spark世界中称为“独立”(与“ressource托管群集”与Mesos或纱线)。