0

我已经在线搜索并尝试了所有解决方案，但在尝试在 hive 中创建外部表时似乎遇到了同样的错误：

失败：执行错误，从 org.apache.hadoop.hive.ql.exec.DDLTask 返回代码 1。org/apache/hadoop/hive/serde2/SerDe

我正在尝试创建一个外部表，用我使用 Flume 从 Twitter 提取的数据填充它。我提取的数据位于 hdfs 存储系统中：/user/hadoop/twitter_data.

我做了以下事情：

  1. hive-serdes-1.0-SNAPSHOT.jar从 Cloudera下载。

  2. 添加罐子/home/hadoop/Desktop/Flume_cheat/twitter/hive-serdes-1.0-SNAPSHOT.jar。

  3. create external table Twitter_Flume3 (id BIGINT,created_at STRING,source STRING,favorited BOOLEAN,retweet_count INT,retweeted_status STRUCT<text:STRING,user1:STRUCT<screen_name:STRING,name:STRING>>,entities STRUCT<urls:ARRAY<STRUCT<expanded_url:STRING>>,user2_mentions:ARRAY<STRUCT<screen_name:STRING,name:STRING>>,hashtags:ARRAY<STRUCT<text:STRING>>>,text STRING,user3 STRUCT<screen_name:STRING,name:STRING,friends_count:INT,followers_count:INT,statuses_count:INT,verified:BOOLEAN,utc_offset:INT,time_zone:STRING>,in_reply_to_screen_name STRING) ROW FORMAT SERDE 'com.cloudera.hive.serde.JSONSerDe' LOCATION '/user/training/flume_result';

  4. FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/hive/serde2/SerDe

版本

  • Hadoop 版本 3.2.1
  • 蜂巢版本 3.1.2
4

0 回答 0