Find centralized, trusted content and collaborate around the technologies you use most.
Teams
Q&A for work
Connect and share knowledge within a single location that is structured and easy to search.
我想知道是否有任何方法可以在作业的 Map 阶段关闭洗牌/排序?我的工作不需要 Reduce 阶段,所以我不需要洗牌和排序。
我正在使用 hadoop 版本 2.2.0
谢谢
您可以将 NumReduceTask 设置为 0,这将只映射数据而无需打乱和排序。