Google cloud dataflow 如何在IDE上本地开发Beam管道并在数据流上运行?

Google cloud dataflow 如何在IDE上本地开发Beam管道并在数据流上运行?,google-cloud-dataflow,apache-beam,Google Cloud Dataflow,Apache Beam,如何在IDE上本地开发Beam管道并在数据流上运行? 我想在我的PC中使用pycharm来开发梁管道并在数据流上运行它们。有关于如何执行此操作的教程吗?将参数设置为: 并尝试以下示例: 这很容易 步骤1:将内容编码为.py文件 在终端中,只需运行.py文件 您可以在本地开发它,并通过“-runner=DataflowRunner”pipelineoption参数将其发送到数据流服务以执行。查看Google数据流文档了解更多信息:切换到“DirectRunner”在本地执行管道,这将使调试和开发

如何在IDE上本地开发Beam管道并在数据流上运行? 我想在我的PC中使用pycharm来开发梁管道并在数据流上运行它们。有关于如何执行此操作的教程吗?

将参数设置为:

并尝试以下示例: 这很容易

  • 步骤1:将内容编码为.py文件
  • 在终端中,只需运行.py文件

  • 您可以在本地开发它,并通过“-runner=DataflowRunner”pipelineoption参数将其发送到数据流服务以执行。查看Google数据流文档了解更多信息:切换到“DirectRunner”在本地执行管道,这将使调试和开发更容易。Gindele-我可以使用“direct run”在本地运行它,而不是在Google云数据流服务上运行它吗?是,设置--runner=DirectRunner将在本地运行它。当连接到gs时,还可以通过ping:gcloud auth应用程序默认登录云SDK的方式成功连接到BG:by。