hadoop - 如果hadoop数据节点文件夹数量不同，会不会出现块复制问题？

Question

假设集群中有 20 个节点，15 个节点有 10 个子文件夹，例如 /data01，... /data10，其他 5 个节点有 6 个子文件夹。数据节点文件夹数量不平衡。
在这种情况下，在块复制中产生问题的可能性更高吗？（例如 ReplicationNotFoundException、BlockMissingException）

如果是这样，在这种情况下除了添加磁盘之外还能做什么？ 谢谢你。

Answer 1

块复制在复制数据时考虑机架感知，并根据复制因子集（在整体 HDFS 级别或每个文件级别等）进行复制

如果没有经过适当的程序（数据上传到 HDFS 之后）移除磁盘，可能会出现块丢失异常，但会自动完成复制。