DoFn中的HTTP客户端
我想通过DoFn对运行在数据流上的apachebeam管道发出POST请求 为此,我创建了一个客户端,该客户端实例化了在PoolghtTPClientConnectionManager上配置的HttpClosableClient 但是,我为我处理的每个元素实例化一个客户端 如何设置所有元素都使用的持久化客户端DoFn中的HTTP客户端,http,google-cloud-dataflow,apache-beam,apache-beam-io,Http,Google Cloud Dataflow,Apache Beam,Apache Beam Io,我想通过DoFn对运行在数据流上的apachebeam管道发出POST请求 为此,我创建了一个客户端,该客户端实例化了在PoolghtTPClientConnectionManager上配置的HttpClosableClient 但是,我为我处理的每个元素实例化一个客户端 如何设置所有元素都使用的持久化客户端 还有其他用于并行和高速HTTP请求的类吗?您可以将客户端放入一个成员变量中,使用@Setup方法打开它,然后使用@Teardown关闭它。Beam中几乎所有IOs的实现都使用这种模式,例如
还有其他用于并行和高速HTTP请求的类吗?您可以将客户端放入一个成员变量中,使用
@Setup
方法打开它,然后使用@Teardown
关闭它。Beam中几乎所有IOs的实现都使用这种模式,例如,请参见。我认为python的等效模式是start\u bundle和finish\u bundle。看见