hive - oozie 协调器中的 Hive 查询

Question

我使用 oozie 协调器运行 10 个 hive 脚本，它以相同的百分比卡在 reduce 阶段的一个脚本中，没有任何错误，脚本是简单的插入语句，我在命令行上测试了它们，它们工作正常，我该如何调试这个？

Answer 1

这是数据倾斜问题，80% 的数据被映射到单个键。一旦我们更新到 Hive 10，倾斜优化连接解决了这个问题。