错误消息如下所示:
Could not load history file hdfs://namenodeha:8020/mr-history/tmp/hdfs/job_1392049860497_0005-1392129567754-hdfs-word+count-1392129599308-1-1-SUCCEEDED-default.jhist
事实上,我知道问题的答案。/mr-history 文件的默认设置为:
hadoop fs -chown -R $MAPRED_USER:$HDFS_USER /mr-history
但是在运行作业时(在 $HDFS_USER 下),作业文件保存到 $HDFS_USER:$HDFS_USER 下的 /mr-history/tmp/hdfs,然后 $MAPRED_USER 无法访问(其中运行 JobHistory 服务器)。再次更改权限后,可以加载作业文件。
但每一份新工作都会再次发生这种情况。那么有人可以帮助我,这是什么永久解决方案,谢谢。