1

我有一个 Hadoop 集群(版本 1.0.3)和一些特定的分析。由于某些原因,map 任务可以决定,在这个特定节点上运行数据是合理的。如果是,那么这项工作将进行一些科学分析。如果没有,最好在不同的节点上重新安排此地图任务尝试。我什至可以预测哪个节点对于重新启动地图任务是合理的。我不想使用跳过功能,因为数据还不错,不应该跳过。但是,如果特定数据将在映射阶段结束时再次处理,那将是合适的。

你有什么建议吗?

问候

4

0 回答 0