spark cassandra连接器配置:每秒并发读取vs输入读取
阅读时感到困惑 concurrent.reads:为joinWithCassandra表设置读取并行性 输入。每秒读取数:设置joinWithCassandraTable每秒每个内核的最大请求数 Datastax中SDE并发读取的说明: 看起来像是并发的。读取与输入的操作相同。每秒读取spark cassandra连接器配置:每秒并发读取vs输入读取,cassandra,cassandra-3.0,spark-cassandra-connector,Cassandra,Cassandra 3.0,Spark Cassandra Connector,阅读时感到困惑 concurrent.reads:为joinWithCassandra表设置读取并行性 输入。每秒读取数:设置joinWithCassandraTable每秒每个内核的最大请求数 Datastax中SDE并发读取的说明: 看起来像是并发的。读取与输入的操作相同。每秒读取 它们之间的真正区别是什么?它们并不相同,但可以被视为相关的 concurrent.reads定义每个核心可以同时发送多少个并发请求(所谓的)。在某些情况下,您可以将其从默认值降低,以避免Cassandra节点因
它们之间的真正区别是什么?它们并不相同,但可以被视为相关的
定义每个核心可以同时发送多少个并发请求(所谓的)。在某些情况下,您可以将其从默认值降低,以避免Cassandra节点因并行处理过多请求而过载李>concurrent.reads
定义每秒可执行的每个核心的请求数input.reads_per__sec
fetch.size_in_rows
定义页面大小:
Concurrent reads set to 4 means in a 4 core spark executor means, 16 requests will run MAX at the same time.