我在一个有 3 个节点的集群MapReduce
上执行我的程序。Multinode
执行时"Status:failed Too many fetch failures"
,MAP 100% 降低到 16% 后出现错误,为什么会出现此错误?
我该如何解决这个问题?
我在一个有 3 个节点的集群MapReduce
上执行我的程序。Multinode
执行时"Status:failed Too many fetch failures"
,MAP 100% 降低到 16% 后出现错误,为什么会出现此错误?
我该如何解决这个问题?
错误的原因可能是 DNS 问题、映射器端的 http 线程或导致连接获取映射输出失败的 JVM 错误。请查看此http://archive.apachecon.com/na2013/presentations/27-Wednesday/Big_Data/14:45-7_Deadly_Hadoop_Misconfigurations-Kathleen_Ting/HadoopTroubleshootingApacheCon.pdf。您可以在第 24 张幻灯片上找到解决方案。
希望这可以帮助