我想在我的 Java 代码中获取一些信息，例如 Map 输入字节、减少 shuffle 字节等。Hadoop 作业完成后，此信息将打印到控制台，但是我正在寻找一种方法将它们放入我的代码中？
问问题
55 次
1 回答
3
您正在寻找 Hadoop 计数器。查看http://lintool.github.io/Cloud9/docs/content/counters.html或者有没有办法从 MR 作业中的 reduce 任务中访问成功的地图任务数量？.
于 2013-06-18T21:24:48.843 回答