Apache spark 如何使用Spark操作符在Kubernetes上运行Tensorflow-Spark作业？_Apache Spark_Tensorflow_Kubernetes_Horovod

Apache spark 如何使用Spark操作符在Kubernetes上运行Tensorflow-Spark作业？

apache-spark tensorflow kubernetes

Apache spark 如何使用Spark操作符在Kubernetes上运行Tensorflow-Spark作业？,apache-spark,tensorflow,kubernetes,horovod,Apache Spark,Tensorflow,Kubernetes,Horovod,我的团队正在寻找一种在Kubernetes上使用Tensorflow库运行Spark作业的方法。我们习惯性地使用Spark操作符在Kubernetes上运行Spark 我应该如何使用Spark作业（PySpark+TF）创建一个pod，并让它与Spark操作员k8s资源一起工作我探索了Horovod，Uber的一个开源深度学习框架。我们不使用GPU进行培训，Horovod似乎比我们的目标更适合这些操作。我也有类似的要求。你是怎么做的？看起来很有趣@ramya rajI最终使用了Horovod并

我的团队正在寻找一种在Kubernetes上使用Tensorflow库运行Spark作业的方法。我们习惯性地使用Spark操作符在Kubernetes上运行Spark

我应该如何使用Spark作业（PySpark+TF）创建一个pod，并让它与Spark操作员k8s资源一起工作

我探索了Horovod，Uber的一个开源深度学习框架。我们不使用GPU进行培训，Horovod似乎比我们的目标更适合这些操作。

我也有类似的要求。你是怎么做的？看起来很有趣@ramya rajI最终使用了Horovod并禁用了GPU设置@SathishI也有类似的要求。你是怎么做的？看起来很有趣@ramya rajI最终使用了Horovod并禁用了GPU设置@萨提斯