Google cloud dataflow 如何使用现有的PubSub订阅和Google提供的PubSub到BigQuery数据流模板

Google cloud dataflow 如何使用现有的PubSub订阅和Google提供的PubSub到BigQuery数据流模板,google-cloud-dataflow,google-cloud-pubsub,Google Cloud Dataflow,Google Cloud Pubsub,我正在尝试使用google提供的模板PubSub to BigQuery设置数据流作业。我看到了一个指定云发布/订阅输入主题的选项,但在GCP控制台UI中没有看到任何指定发布/订阅输入订阅的选项 如果我提供了主题,job将自动创建订阅以读取所提供主题中的消息。问题是,在数据流作业启动后,作业将只看到发布到主题的消息。以前发布到同一主题的任何内容都将被忽略 我的工作中没有任何复杂的转换要做。所以谷歌提供的模板对我来说是现成的。但缺乏指定我自己订阅的能力让我感到困扰。我不想仅仅因为这个原因而设置自定

我正在尝试使用google提供的模板
PubSub to BigQuery
设置数据流作业。我看到了一个指定云发布/订阅输入主题的选项,但在GCP控制台UI中没有看到任何指定发布/订阅输入订阅的选项

如果我提供了主题,job将自动创建订阅以读取所提供主题中的消息。问题是,在数据流作业启动后,作业将只看到发布到主题的消息。以前发布到同一主题的任何内容都将被忽略


我的工作中没有任何复杂的转换要做。所以谷歌提供的模板对我来说是现成的。但缺乏指定我自己订阅的能力让我感到困扰。我不想仅仅因为这个原因而设置自定义作业管道。有人知道这是否有解决办法吗

这是当前不受支持的。然而,这是一个很好的用例,并且在谷歌云团队的雷达上

如果你能发电子邮件给我bookman@google.com我将确保向您通报开发情况,以实现这一点

感谢您的反馈

科林