使用Java持久化Spark Jobserver名称对象
使用Spark Jobserver 0.6.2和Apache Spark 2.0.2,我已经实现了一些功能。但我找不到如何在java中的特定上下文中持久化数据集,以便在不同的作业之间共享。这个功能只对Scala可用吗?因为在网上我只能找到Scala的例子。 我检查了java,在job-server-api_2.11.jar中有一些NamedObject*类,但不知道如何使用它们。实际上,我的作业类是从spark.jobserver.JavaSparkJob扩展而来的 谢谢使用Java持久化Spark Jobserver名称对象,java,apache-spark,spark-jobserver,Java,Apache Spark,Spark Jobserver,使用Spark Jobserver 0.6.2和Apache Spark 2.0.2,我已经实现了一些功能。但我找不到如何在java中的特定上下文中持久化数据集,以便在不同的作业之间共享。这个功能只对Scala可用吗?因为在网上我只能找到Scala的例子。 我检查了java,在job-server-api_2.11.jar中有一些NamedObject*类,但不知道如何使用它们。实际上,我的作业类是从spark.jobserver.JavaSparkJob扩展而来的 谢谢 不能将作业服务器0.6
谢谢,这解决了我的疑问。我正在将Spark 2.0.2与Job Server 0.7.0一起使用,到目前为止,它工作正常。我应该知道些什么吗?