Java 如何在Windows上配置Apache Spark？

我想在我的Windows计算机上安装Apache Spark。是否有任何特定于Windows的步骤我必须遵循

从中下载并打开spark-1.6.0-bin-hadoop2.6.tgz，例如7zip

将其解压缩到一个文件夹，例如C:\sparktest。所以我的结构现在是C:\SparkTest\spark-1.6.0-bin-hadoop2.6\

我们下载适用于Windows的hadoop2.6.0：

我们在某处提取它

在Spark base文件夹中，我们进入

conf

文件夹，其中应该有一个名为

log4j.properties.template

的文件。 我们删除了模板部分，因此名称应该是

log4j.properties

。为了我们自己的理智，我们可以打开文件并将

rootCategory

从

INFO

更改为

WARN

将Spark

bin

文件夹添加到系统的

PATH

环境变量中

我们创建了一个环境变量

SPARK\u HOME

，并将其更改为SPARK base文件夹（

SPARK-1.6.0-bin-hadoop2.6

）

我们创建

HADOOP\u HOME

环境变量，将其设置为提取的HADOOP基本文件夹

就这些

---

稍后您必须学习sbt和scala。

如果提供的答案解决了您的问题，请不要忘记接受。看见