Hadoop 复制上和复制下的HDFS

Hadoop 复制上和复制下的HDFS,hadoop,hdfs,Hadoop,Hdfs,HDFS中何时发生过度复制?因为复制因子是在hdfs-site.xml中设置的,复制由Hadoop框架负责 关于在复制下: 当集群中的一个或多个DataNode由于某些故障而停机,并且再也没有回来时,就会发生这种情况。在这种情况下,存储在这些停机节点上的块的预期复制因子会降低 关于过度复制: 当一个或多个DataNode宕机但在一段时间后返回时,这种情况再次发生。对于这段短暂的停机时间,Namenode会看到一些块未被复制,并开始复制未被复制的块,以使块计数恢复正常。如果在一段时间后,这些停机的

HDFS中何时发生过度复制?因为复制因子是在hdfs-site.xml中设置的,复制由Hadoop框架负责

关于在复制下: 当集群中的一个或多个DataNode由于某些故障而停机,并且再也没有回来时,就会发生这种情况。在这种情况下,存储在这些停机节点上的块的预期复制因子会降低

关于过度复制: 当一个或多个DataNode宕机但在一段时间后返回时,这种情况再次发生。对于这段短暂的停机时间,Namenode会看到一些块未被复制,并开始复制未被复制的块,以使块计数恢复正常。如果在一段时间后,这些停机的数据节点再次返回,那么将有比预期更多的块副本