hadoop - 如何清除hadoop fifo队列？

Question

我已经建立了一个伪分布式模式集群设置。FIFO 调度程序以某种方式卡在两者之间，因此我通过 cron 调度了很多工作。现在，当我重新启动 YARN 资源管理器时，它会在一段时间后卡住，并且作业不断堆积。

有没有办法可以清除整个队列。或者，是不是我对 hadoop 调度的完整理解存在缺陷。请帮忙。

score 4 · Accepted Answer

如果你试图杀死队列中的所有作业，你可以使用这个 shell 脚本：

$HADOOP_HOME/bin/hadoop job -list | awk ' { system("$HADOOP_HOME/bin/hadoop job -kill " $1) } '

1 回答 1