1

在 pig 11 中,是否支持比较日期时间类型?例如:日期 1:日期时间

并且过滤器具有条件: date1 >= ToDate('1999-01-01')

这种比较是否返回正确的结果?

4

1 回答 1

14

日期比较可视为数值比较。例如:

cat date1.txt
1999-01-01
2011-03-19
2011-02-24
2011-02-25
2011-05-23
1978-12-13

A = load 'date1.txt' as (in:chararray);
B = foreach A generate ToDate(in, 'yyyy-MM-dd') as (dt:datetime);
--filter dates that are equal or greater than 2011-02-25: 
C = filter B by DaysBetween(dt, 
      (datetime)ToDate('2011-02-25', 'yyyy-MM-dd')) >=(long)0;

dump C;
(2011-03-19T00:00:00.000+01:00)
(2011-02-25T00:00:00.000+01:00)
(2011-05-23T00:00:00.000+02:00)

传递给ToDate的自定义格式模式遵循 Java 的SimpleDateFormat约定。
注意大写和小写字母,例如D表示Day in yeard表示Day in month。这可能导致从 chararray 到 datetime 的不适当日期转换。

或者,如果您的 chararray 日期是 ISO 格式,您也可以使用Piggybank的 UDF。

于 2013-07-20T21:38:17.027 回答