Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 生产用火花安装,pip安装与否?_Apache Spark_Pyspark_Pip - Fatal编程技术网

Apache spark 生产用火花安装,pip安装与否?

Apache spark 生产用火花安装,pip安装与否?,apache-spark,pyspark,pip,Apache Spark,Pyspark,Pip,我想安装Pyspark 2.4.4。我已经看到我可以下载Spark软件包或使用pip安装。我只需要Pyspark,这两个安装都一样吗?您可以使用python pip安装Pyspark,但它没有Hadoop二进制文件,这是spark正常运行所必需的 最简单的安装方法是使用python findspark 从Hadoop二进制文件附带的spark下载.tgz文件 pip install findspark 在Python中: 进口金融园 finspark.init“\path\to\extract

我想安装Pyspark 2.4.4。我已经看到我可以下载Spark软件包或使用pip安装。我只需要Pyspark,这两个安装都一样吗?

您可以使用python pip安装Pyspark,但它没有Hadoop二进制文件,这是spark正常运行所必需的

最简单的安装方法是使用python findspark

从Hadoop二进制文件附带的spark下载.tgz文件

pip install findspark
在Python中:

进口金融园 finspark.init“\path\to\extracted\binaries\folder” 进口Pypark