Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 集群中应该在哪里安装apachelivy_Apache Spark_Livy - Fatal编程技术网
Fatal编程技术网
  • apache-spark/
  • Apache spark 集群中应该在哪里安装apachelivy

Apache spark 集群中应该在哪里安装apachelivy

apache-spark

Apache spark 集群中应该在哪里安装apachelivy,apache-spark,livy,Apache Spark,Livy,我们希望使用ApacheLivy，以便可以从restapi调用spark作业。所以我们需要在名称节点或边缘节点上安装Livy服务器吗。最佳实践是什么 我们的spark fat jar将驻留在NFS路径中。Livy可以安装在任何位置。您只需正确配置它即可使用资源管理器。如果您安装在运行spark submit的边缘节点中，则更易于配置

我们希望使用ApacheLivy，以便可以从restapi调用spark作业。所以我们需要在名称节点或边缘节点上安装Livy服务器吗。最佳实践是什么

我们的spark fat jar将驻留在NFS路径中。

Livy可以安装在任何位置。您只需正确配置它即可使用资源管理器。如果您安装在运行spark submit的边缘节点中，则更易于配置