Hive 数据节点堆使用率

Hive 数据节点堆使用率,hive,hdfs,hdp,datanode,Hive,Hdfs,Hdp,Datanode,我在HDP-3.1.0.0环境中工作,我使用的HDFS版本是3.1.1.3.1,集群由2个Namenodes和4个Datanodes组成 该集群自2020年1月启动并运行,未进行任何更改。但是突然,在7月底,数据节点开始达到最大堆大小(1G),并成为死数据节点 我尝试将最大堆大小增加到2G,现在集群已经正常,但我想了解这种行为的根本原因,因为我不想在接下来的几个月内再次增加堆大小。我需要理解为什么数据节点达到最大值 我能做什么 这可能是由配置单元管理的表中的行数增加引起的吗

我在HDP-3.1.0.0环境中工作,我使用的HDFS版本是3.1.1.3.1,集群由2个Namenodes和4个Datanodes组成

该集群自2020年1月启动并运行,未进行任何更改。但是突然,在7月底,数据节点开始达到最大堆大小(1G),并成为死数据节点

我尝试将最大堆大小增加到2G,现在集群已经正常,但我想了解这种行为的根本原因,因为我不想在接下来的几个月内再次增加堆大小。我需要理解为什么数据节点达到最大值

我能做什么

这可能是由配置单元管理的表中的行数增加引起的吗