Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark livy.rsc.jars和livy.repl.jars之间有什么区别?_Apache Spark_Livy - Fatal编程技术网

Apache spark livy.rsc.jars和livy.repl.jars之间有什么区别?

Apache spark livy.rsc.jars和livy.repl.jars之间有什么区别?,apache-spark,livy,Apache Spark,Livy,我正在使用sparkmagic内核(spark scala)开发Jupyter笔记本,该内核依赖ApacheLivy来运行spark作业 我目前正在尝试了解使用用户提供的依赖项(即JAR)创建会话的选项 我知道在Jupyter我可以做一些事情,比如: %%configure -f {"kind": "spark", "executorMemory": "2G", "executorCores": 4, "jars": ["/path/to/library1.jar",

我正在使用sparkmagic内核(spark scala)开发Jupyter笔记本,该内核依赖ApacheLivy来运行spark作业

我目前正在尝试了解使用用户提供的依赖项(即JAR)创建会话的选项

我知道在Jupyter我可以做一些事情,比如:

%%configure -f
{"kind": "spark", 
 "executorMemory": "2G", 
 "executorCores": 4, 
 "jars": ["/path/to/library1.jar",
         "/path/to/library2"]}
但是后来我注意到了
LIVY_HOME/conf/LIVY.conf
中的其他选项,特别是
LIVY.resc.jars
LIVY.repl.jars
,但我认为这些描述不是很具体,或者我无法找到它们之间的实际区别

我猜如果他们分开是为了什么,但具体是什么