1

我有一个这样的输入文件：

481295b2-30c7-4191-8c14-4e513c7e7577,1362974399,56973118825,56950298471,true
67912962-dd84-46fa-84ef-a2fba12c2423,1362974399,56950556676,56982431507,false
cc68e779-4798-405b-8596-c34dfb9b66da,1362974399,56999223677,56998032823,true
37a1cc9b-8846-4cba-91dd-19e85edbab00,1362974399,56954667454,56981867544,false
4116c384-3693-4909-a8cc-19090d418aa5,1362974399,56986027804,56978169216,true

我只需要最后提交的行是“真”。所以我使用以下 Pig Latin：

records = LOAD 'test/test.csv' USING PigStorage(',');
A = FILTER records BY $4 'true';
DUMP A;

问题是第二个命令，我总是得到错误：

2013-08-07 16:48:11,505 [main] ERROR org.apache.pig.tools.grunt.Grunt - ERROR 1200: <line 2, column 25>  mismatched input ''true'' expecting SEMI_COLON

为什么？我也尝试了 "$4 == 'true'" 但仍然不起作用。谁能告诉我如何做这个简单的事情？

4

1 回答 1

3

怎么样：

A = FILTER records BY $4 == 'true' ;

此外，如果您事先知道数据将包含多少个字段，您应该给它一个模式。就像是：

records = LOAD 'test/test.csv' USING PigStorage(',') 
          AS (val1: chararray, val2: int, val3: int, val4: int, bool: chararray);

或者任何适合您需要的名称/类型。

于 2013-08-07T23:30:05.673 回答