Google cloud dataflow 如何管理google云数据流中的工作人员

Google cloud dataflow 如何管理google云数据流中的工作人员,google-cloud-dataflow,Google Cloud Dataflow,我从Google cloud cookbook示例中运行了该程序。当我观察数据流监控控制台时,工作人员从未超过一名。我使用谷歌云1年免费使用 为什么自动缩放从不增加工人数量?通常需要几分钟的时间才能开始增加工人数量 您可以在“管道选项”中指定具有numWorkers的工人的初始数量 谢谢你,亚历克斯。在dataflow monitor控制台中,参考资料部分中只列出了一个cpu。这是因为我正在使用免费的1年使用计划。如果这是您运行的,您能否提供您的命令行选项和pom.xml文件,以便我们了解您如何

我从Google cloud cookbook示例中运行了该程序。当我观察数据流监控控制台时,工作人员从未超过一名。我使用谷歌云1年免费使用


为什么自动缩放从不增加工人数量?

通常需要几分钟的时间才能开始增加工人数量

您可以在“管道选项”中指定具有
numWorkers
的工人的初始数量


谢谢你,亚历克斯。在dataflow monitor控制台中,参考资料部分中只列出了一个cpu。这是因为我正在使用免费的1年使用计划。如果这是您运行的,您能否提供您的命令行选项和pom.xml文件,以便我们了解您如何运行该作业?您可能希望在Google云平台控制台的Stackdriver日志中检查作业日志,以查看是否存在可以提供的警告或错误。另外,在配额页面中,如果您看到计算引擎API耗尽了其正在使用的IP地址,那么这也会影响自动缩放。您在运行作业时指定的三个选项是什么,autoscalingAlgorithm、numWorkers和maxNumWorkers?当这些选项设置正确时,工人应该扩大规模。有关选项的说明,请参阅本文档。1年免费使用不会限制您可以使用的工人。