0

所以我一直在尝试运行 Hadoop MapReduce 作业一段时间,在它成功开始运行后(所有错误都已解决),我想检查日志文件中捕获的标准输出,但不知何故我看到不是每次都生成日志文件。(有时会来,有时不会)

我正在使用一个输出目录/user/hduser/output_dir(上次我运行这项工作。另外,中的日志文件与“是否为已知问题/user/hduser/output_dir”不匹配,$HADOOP_HOME/logs/userlogs 有什么解决方案吗?我在任何地方都没有找到答案。谢谢您的帮助。!

编辑 - 所以我们发现只有在特定时间间隔后才会写入日志文件,因此如果在这段时间内运行两次作业,则不会为此写入新的日志文件。为什么会这样,如果可能的话,我如何使用一些配置更改来覆盖它?

4

0 回答 0