我正在Hadoop
通过hadoop-streaming-1.0.3.16.jar
.
我的地图任务失败并显示以下消息:
ERROR streaming.StreamJob: Job not successful. Error: # of failed Map Tasks exceeded allowed limit. FailedCount: 1. LastFailedTask: <task id>
我没有得到其他诊断。
我正在使用以下选项运行 map-reduce 流式传输任务:
- 文件映射器
- 文件缩减器
- 输入 /user/ME/INPUT_FILE
- 输出 /user/ME/OUTPUT_FILE
如何更好地(一些!)诊断地图任务失败的原因?