elasticsearch,apache-spark,Java,elasticsearch,Apache Spark" /> elasticsearch,apache-spark,Java,elasticsearch,Apache Spark" />

Java ElasticSearch Spark CPU利用率飙升至300%

Java ElasticSearch Spark CPU利用率飙升至300%,java,elasticsearch,apache-spark,Java,elasticsearch,Apache Spark,我有一个12核和10GB内存的Spark群集。 两台机器在集群模式下有效运行。 在这两台机器上,我还设置了ElasticSearch集群 我每秒写大约15万条记录。。。成批5000件 但是,批量插入模式启动时,Elasticsearch和Spark的Java进程都使用了大约300%的CPU:( 有人能解释一下发生了什么吗?这不是问题,只是12个CPU中的3个最大值。你说的10万是什么意思?@eliasah,WoodChopper正确地指出了150万=150000它告诉你要增加批量:)

我有一个12核和10GB内存的Spark群集。 两台机器在集群模式下有效运行。 在这两台机器上,我还设置了ElasticSearch集群

我每秒写大约15万条记录。。。成批5000件 但是,批量插入模式启动时,Elasticsearch和Spark的Java进程都使用了大约300%的CPU:(


有人能解释一下发生了什么吗?

这不是问题,只是12个CPU中的3个最大值。

你说的10万是什么意思?@eliasah,WoodChopper正确地指出了150万=150000它告诉你要增加批量:)