Apache kafka 哪些跑步者支持apache beam中的卡夫卡约?

Apache kafka 哪些跑步者支持apache beam中的卡夫卡约?,apache-kafka,google-cloud-dataflow,apache-beam,apache-beam-io,Apache Kafka,Google Cloud Dataflow,Apache Beam,Apache Beam Io,我正在与apache beam合作。我的任务是从卡夫卡主题中提取数据,并在数据流中进行处理。 数据流是否支持kafkaIO? 卡夫卡约支持哪些跑步者?是。KafkaIO由Dataflow和其他主要的Beam Runner支持 我们为和SDK都提供了卡夫卡变换 请注意,Python版本是必需的,数据流需要。谢谢@chamikara,根据apache beam文档,“--experiments=use_runner_v2”是我们使用RunnerV2需要传递的参数。这是否足够,或者我需要在代码中进行更

我正在与apache beam合作。我的任务是从卡夫卡主题中提取数据,并在数据流中进行处理。 数据流是否支持kafkaIO?

卡夫卡约支持哪些跑步者?

是。KafkaIO由Dataflow和其他主要的Beam Runner支持

我们为和SDK都提供了卡夫卡变换


请注意,Python版本是必需的,数据流需要。

谢谢@chamikara,根据apache beam文档,“--experiments=use_runner_v2”是我们使用RunnerV2需要传递的参数。这是否足够,或者我需要在代码中进行更改?对不起,我是apache beam的新手,应该足够了。您还需要在提交作业的管道中安装Java。我们正在给Beam添加一个例子,这个例子应该能更好地说明这一点。答案有用吗?@Pablo,从概念上来说没问题,但实际上我需要更多地研究runner_v2。