1

目前在我们的生产环境中,我们在 tez 上使用 hive 而不是 mapreduce 引擎,所以我想问一下所有用于连接的 hive 优化是否也与 tez 相关?例如在多表中,有人提到如果连接键相同,那么它将使用单个映射减少作业,但是当我在我们的环境中检查 HQL 时,我们正在加入一个左外表,同一键上有许多表,我没有看到 1减速器,实际上有 17 个减速器在运行。是不是因为 tez 上的 hive 与 mr 上的 hive 不同?

Hive 版本:1.2 Hadoop:2.7 以下是它提到仅使用 1 个减速器的文档 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Joins

4

0 回答 0