Warning: file_get_contents(/data/phpspider/zhask/data//catemap/8/file/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 获取有关工作流提交后创建的当前dataproc群集的信息_Apache Spark_Pyspark_Google Cloud Dataproc - Fatal编程技术网
Fatal编程技术网
  • apache-spark/
  • Apache spark 获取有关工作流提交后创建的当前dataproc群集的信息

Apache spark 获取有关工作流提交后创建的当前dataproc群集的信息

apache-spark pyspark

Apache spark 获取有关工作流提交后创建的当前dataproc群集的信息,apache-spark,pyspark,google-cloud-dataproc,Apache Spark,Pyspark,Google Cloud Dataproc,假设我使用dataproc工作流模板和临时集群运行pyspark作业。。。如何获取在pyspark作业中创建的群集的名称一种方法是分叉并运行以下命令： /usr/share/google/get_metadata_value attributes/dataproc-cluster-name 唯一的输出将是集群名称，没有任何新行字符或任何其他需要清理的内容。看

假设我使用dataproc工作流模板和临时集群运行pyspark作业。。。如何获取在pyspark作业中创建的群集的名称一种方法是分叉并运行以下命令：

/usr/share/google/get_metadata_value attributes/dataproc-cluster-name
唯一的输出将是集群名称，没有任何新行字符或任何其他需要清理的内容。看