最近我们用 CDH 5 升级到 YARN。
(版本:2.3.0 cdh5.1.3,r8e266e052e423af592871e2dfe09d54c03f6a0e8)
我试图通过单击 ApplicationMaster 上的日志从资源管理器访问失败作业的日志,但出现以下错误:
container_1412602970010_0037_01_000002 的重定向失败尝试构建到日志服务器的重定向 url 失败。Log Server url 可能未配置 Container 不存在。
同样在pig/mapreduce
工作中,我们看到以下警告:
信息:2014-10-07 15:42:19,134 [main] WARN org.apache.hadoop.security.UserGroupInformation - PriviledgedActionException as:jobs (auth:SIMPLE) 原因:java.io.IOException: org.apache.hadoop.ipc .RemoteException(org.apache.hadoop.yarn.exceptions.YarnRuntimeException): 无法加载历史文件 hdfs://prod-hadoop:8020/user/history/done_intermediate/jobs/job_1412706451566_0032-1412710613932-jobs-PigLatin%3Aclk_imp_join_2014%2D10 %2D04T13-1412710831122-14-2-SUCCEEDED-root.jobs-1412710694546.jhist
我在配置中遗漏了什么吗?