Google cloud dataflow 隐藏数据流选项

Google cloud dataflow 隐藏数据流选项,google-cloud-dataflow,apache-beam,Google Cloud Dataflow,Apache Beam,我使用带有模板的Google cloud dataflow runner,并通过管道选项(例如用户名和密码)将敏感信息传递给它。任何从dataflow控制台打开我的dataflow作业的人都可以在侧面板中清楚地看到我通过选项发送的敏感信息。有没有办法隐藏这些选项以防出现?多谢各位 一种想法可能是更改管道,使其不从参数中获取敏感值,而是使用备用值。例如,不提供用户名和密码作为管道选项,而是从GCS文件中读取这些选项,该文件包含用户名和密码,并且该文件的权限不允许从其他人处读取。您是否能够为正在使用

我使用带有模板的Google cloud dataflow runner,并通过管道选项(例如用户名和密码)将敏感信息传递给它。任何从dataflow控制台打开我的dataflow作业的人都可以在侧面板中清楚地看到我通过选项发送的敏感信息。有没有办法隐藏这些选项以防出现?多谢各位

一种想法可能是更改管道,使其不从参数中获取敏感值,而是使用备用值。例如,不提供用户名和密码作为管道选项,而是从GCS文件中读取这些选项,该文件包含用户名和密码,并且该文件的权限不允许从其他人处读取。您是否能够为正在使用的服务使用服务帐户等机制?不,很遗憾,服务帐户不是我们用例的选项。