Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/apache-kafka/3.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache kafka Clickhouse kafka表引擎与许多消费者_Apache Kafka_Clickhouse - Fatal编程技术网

Apache kafka Clickhouse kafka表引擎与许多消费者

Apache kafka Clickhouse kafka表引擎与许多消费者,apache-kafka,clickhouse,Apache Kafka,Clickhouse,我计划通过使用以下方法将我的卡夫卡主题吸收到SummingMergeTree中,对Clickhouse进行一些测试: 对于我在dev env上的测试,我并不担心数量,但在生产环境中,我们已经在使用这些主题,我们必须让许多用户能够以最快的速度阅读消息。我的问题是:在Clickhouse上有没有一种方法可以让许多卡夫卡消费者使用卡夫卡引擎坐在一张桌子上 谢谢 Romaric阅读文档时,卡夫卡引擎中的num_consumers参数似乎正是您所需要的: num_consumers–每个表的使用者数。默认

我计划通过使用以下方法将我的卡夫卡主题吸收到SummingMergeTree中,对Clickhouse进行一些测试:

对于我在dev env上的测试,我并不担心数量,但在生产环境中,我们已经在使用这些主题,我们必须让许多用户能够以最快的速度阅读消息。我的问题是:在Clickhouse上有没有一种方法可以让许多卡夫卡消费者使用卡夫卡引擎坐在一张桌子上

谢谢


Romaric

阅读文档时,卡夫卡引擎中的num_consumers参数似乎正是您所需要的:

num_consumers–每个表的使用者数。默认值:1。具体说明 如果一个消费者的吞吐量不足,则需要更多消费者。这个 使用者总数不应超过分区数 在本主题中,因为每个分区只能分配一个使用者


哇,事实上,我本应该更好地阅读文档的。非常感谢。