Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/tensorflow/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop HDFS文件系统中数据块丢失/损坏的原因_Hadoop_Hdfs - Fatal编程技术网

Hadoop HDFS文件系统中数据块丢失/损坏的原因

Hadoop HDFS文件系统中数据块丢失/损坏的原因,hadoop,hdfs,Hadoop,Hdfs,只想知道HDFS中数据块丢失/损坏的原因。 我的HDFS集群有20个节点,其中1个主节点、1个HA节点、18个从节点。已经从HDFS位置移除了3个从机,在我们启动hadoop之后,由于数据块丢失而出现错误,同时检查发现块位于未移除的从机中,甚至主/从中的NameNode日志和Datanode日志都有所述数据块的中心,表示Hadoop已正确通信以重新定位/恢复相同的块,但在检查受尊重的从中的相同块时,我无法再找到这些块 是否有任何原因导致在没有任何手动干预的情况下删除/删除块? 任何dea关于可能

只想知道HDFS中数据块丢失/损坏的原因。 我的HDFS集群有20个节点,其中1个主节点、1个HA节点、18个从节点。已经从HDFS位置移除了3个从机,在我们启动hadoop之后,由于数据块丢失而出现错误,同时检查发现块位于未移除的从机中,甚至主/从中的NameNode日志和Datanode日志都有所述数据块的中心,表示Hadoop已正确通信以重新定位/恢复相同的块,但在检查受尊重的从中的相同块时,我无法再找到这些块

是否有任何原因导致在没有任何手动干预的情况下删除/删除块? 任何dea关于可能捕获这些未识别选项的日志的信息

注意:之前也执行了节点添加/删除选项,但从未遇到此类问题,即使重新添加已删除的节点,问题也未得到解决。在失物招领处办理入住手续,但那里的街区也不可用

我只是想知道删除数据块的所有可能原因,以及我们是否可以执行相同的跟踪

谢谢和问候