Apache spark SPARK HISTORY SERVER上的CPU使用率为100%

Apache spark SPARK HISTORY SERVER上的CPU使用率为100%,apache-spark,cloudera,Apache Spark,Cloudera,SPARK HISTORY SERVER上的CPU使用率为100%,这是SPARK HISTORY SERVER上的正确行为吗 我使用CDH 5.4.3我不希望spark history服务器使用100%的CPU。我会检查火花历史服务器的堆大小,如果它被注销,请考虑添加更多。 最后,我删除了所有旧日志,cpu使用率降低了 hadoop jar /opt/cloudera/parcels/CDH/lib/solr/contrib/mr/search-mr-job.jar org.apache.so

SPARK HISTORY SERVER上的CPU使用率为100%,这是SPARK HISTORY SERVER上的正确行为吗


我使用CDH 5.4.3

我不希望spark history服务器使用100%的CPU。我会检查火花历史服务器的堆大小,如果它被注销,请考虑添加更多。 最后,我删除了所有旧日志,cpu使用率降低了

hadoop jar /opt/cloudera/parcels/CDH/lib/solr/contrib/mr/search-mr-job.jar org.apache.solr.hadoop.HdfsFindTool -find /user/spark/applicationHistory -mtime +7 | xargs hdfs dfs -rm -r -skipTrash
我认为我的cloudera版本有这个bug