shell - 如何使用 Dimporttsv 将 csv 文件从 hdfs 加载到 hbase 表

Question

我正在尝试使用 shell 命令Dimporttsv. 将 csv 文件加载到 hbase 表中 csv 文件位于我的 hdfs (/csvFiles) 的目录中

csv 文件是从具有以下字段的 mysql 表生成的：

+-------------+
Field       
+-------------+
tweet_id
user_id
screen_name
description
created_at
+-------------+

我在 hbase 中创建了一个具有单个姓氏的表，如下所示：

create 'dummyTable', 'cf1'

我正在使用的命令：

ImportTsv -Dimporttsv.separator=',' -Dimporttsv.columns=HBASE_ROW_KEY,cf1:user_id,cf1:tweet_id,cf1:screen_name,cf1:description,cf1:created_at dummyTable /csvFiles/all_users.csv

但是我收到了这个语法错误：

SyntaxError: (hbase):8: syntax error, unexpected tSYMBEG

我查看了以下帖子并遵循其中的建议，但无济于事。我会很感激你的帮助。

将 TSV 文件导入 hbase 表

https://community.hortonworks.com/articles/4942/import-csv-data-into-hbase-using-importtsv.html

http://hbase.apache.org/book.html#importtsv

Answer 1

退出Hbase shell并尝试添加单引号importtsv.columns

bash$ hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.separator=',' -Dimporttsv.columns='HBASE_ROW_KEY,cf1:user_id,cf1:tweet_id,cf1:screen_name,cf1:description,cf1:created_at' dummyTable hdfs://<your_name_node_addr>/csvFiles/all_users.csv

（或者）

From Hbase Shell:

hbase(main):001:0> ImportTsv -Dimporttsv.separator=',' -Dimporttsv.columns='HBASE_ROW_KEY,cf1:user_id,cf1:tweet_id,cf1:screen_name,cf1:description,cf1:created_at' dummyTable hdfs://<your_name_node_addr>/csvFiles/all_users.csv