Google cloud dataflow 是否有数据流日志附加器?

Google cloud dataflow 是否有数据流日志附加器?,google-cloud-dataflow,apache-beam,Google Cloud Dataflow,Apache Beam,是否可以在数据流中注册回写追加器 使用Beam,我可以为DirectRunner定义一个appender,但是当我部署到Dataflow时,它似乎不再工作了。这只是我的logback.xml丢失了,还是因为运行程序有自己的根记录器?数据流运行程序负责编排和并行化管道,以便在分布式环境中运行。作为其中的一部分,它使用SLF4J管理日志记录 如果您可以让logback在一个受支持的库上运行,或者直接使用其中一个库,那么您应该能够在云日志上获取作业的日志消息 该文档是针对Dataflow SDK的,但

是否可以在数据流中注册回写追加器


使用Beam,我可以为DirectRunner定义一个appender,但是当我部署到Dataflow时,它似乎不再工作了。这只是我的logback.xml丢失了,还是因为运行程序有自己的根记录器?

数据流运行程序负责编排和并行化管道,以便在分布式环境中运行。作为其中的一部分,它使用SLF4J管理日志记录

如果您可以让logback在一个受支持的库上运行,或者直接使用其中一个库,那么您应该能够在云日志上获取作业的日志消息


该文档是针对Dataflow SDK的,但它应该同样适用于beam:

我正在研究连接到日志系统以向外部服务报告错误,因为云日志在错误聚合方面非常糟糕,并且不支持Stackdriver错误报告(目前还不支持)?发出实际消息不是我的问题。