Java 无法使用spring boot连接到远程服务器上安装的远程独立Apache spark
我想连接到ApacheSpark，它是从本地机器上运行的SpringBoot应用程序在远程服务器上设置的。我在网上看到了一些示例，但都在本地系统上配置了spark，并在spark.home中提供了可安装路径 我想要一个类似的设置，但不是spark.home指向本地系统，它应该连接到远程机器。任何帮助都将不胜感激 下面是代码Java 无法使用spring boot连接到远程服务器上安装的远程独立Apache spark,java,apache-spark,Java,Apache Spark,我想连接到ApacheSpark，它是从本地机器上运行的SpringBoot应用程序在远程服务器上设置的。我在网上看到了一些示例，但都在本地系统上配置了spark，并在spark.home中提供了可安装路径 我想要一个类似的设置，但不是spark.home指向本地系统，它应该连接到远程机器。任何帮助都将不胜感激 下面是代码 import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaSparkContext; i
import org.apache.spark.SparkConf;
import org.apache.spark.api.java.JavaSparkContext;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
import org.springframework.context.annotation.Bean;
@SpringBootApplication
public class SpringSparkApplication {
@Value("${spark.app.name}")
private String appName;
@Value("${spark.master}")
private String masterUri;
@Bean
public SparkConf conf() {
return new SparkConf().setAppName(appName).setMaster(masterUri);
}
@Bean
public JavaSparkContext sc() {
return new JavaSparkContext(conf());
}
public static void main(String[] args) {
SpringApplication.run(SpringSparkApplication.class, args);
}
}