0

我正在使用 hadoop map 进行图像分析,但与 hadoop 的设计目的有点不同。我正在从 NAS 而不是 HDFS 读取图像,并通过 map 任务调用的预编译二进制文件对其进行分析。图像位置与密钥一起存储在一个大文本文件中,并将其拆分为多个数据节点。

因此,如果我的输入拆分在节点 2、3、4 中并且我的地图任务在节点 6 中运行,我得到的结果不准确。

我如何确保 hadoop 正在调度映射任务,以便映射任务节点始终是输入拆分节点之一?

4

0 回答 0