如何将 Hadoop 减速器的输出路径保存到变量中？
此变量将被所有其他 MR 作业使用。
这些作业将是连续的。
所有连续的 MR 作业都会将其相应的输出写入该输出目录。
我需要相应地更新他们的路径变量。
问问题
622 次
1 回答
0
看看“Oozie”。这是一个 Hadoop 工作流引擎，它允许您所描述的内容。多个作业可以将它们的“输入”作为上一个作业的“输出”。
还有其他解决方案，例如“级联”API。
http://www.concurrentinc.com/products/ http://yahoo.github.com/oozie/releases/2.0.0/#Quick_Start
于 2011-05-31T18:13:24.680 回答