hadoop - 我可以在 Hive 中进行 LEFT JOIN LATERAL 吗？

Question

我想在 Hive 中进行横向连接。有没有办法支持这一点？本质上，我想将 LHS 上的行中的值用作 RHS 上任意 SQL 的参数。

这是 Postgres 的一个示例：（请原谅我的粗略示例）：

create table lhs (
    subject_id integer,
    date_time  BIGINT );

create table events (
    subject_id  integer,
    date_time   BIGINT,
    event_val   integer );

SELECT * from lhs LEFT JOIN LATERAL ( select SUM(event_val) as val_sum, count(event_val) as ecnt from events WHERE date_time < lhs.date_time and subject_id = lhs.subject_id ) rhs1 ON true;

Answer 1

Hive 不支持LEFT JOIN LATERAL，请使用下面的查询，这相当于您的查询。我已经用示例数据进行了测试，它产生了相同的结果。

select subject_id,date_time,SUM(event_val) as val_sum,COUNT(event_val) as ecnt 
from (SELECT a.subject_id as subject_id ,
      a.date_time as date_time, b.date_time as bdate , b.event_val as event_val
      FROM events b LEFT OUTER JOIN lhs a 
      ON b.subject_id = a.subject_id) abc 
where bdate < date_time group by subject_id,date_time;

希望我能帮助您制定如何在蜂巢中实现相同目标的方法。