postgresql - Hive 流式传输不起作用

Question

我尝试按照
https://cwiki.apache.org/confluence/display/Hive/Streaming+Data+Ingest#StreamingDataIngest-StreamingRequirements启用配置单元流

我已更改所有配置属性以启用配置单元流，但配置单元元存储服务运行时出现以下错误，

18/02/09 12:22:51 ERROR compactor.Initiator: Caught an exception in the main loop of compactor initiator, exiting MetaException(message:Unable to connect to transaction database org.postgresql.util.PSQLException: ERROR: relation "compaction_queue" does not exist

注意：我使用 PostgreSQL for JDBC Metastore 和 hive 版本 2.0.1

帮助我解决此错误并开始使用 Hive Streaming。

Answer 1

可以在https://github.com/apache/hive/blob/branch-2.0/metastore/scripts/upgrade/postgres/hive-txn-中找到该表的定义（以及其他与 ACID 表/流式摄取相关的）模式 2.0.0.postgres.sql。所有这些都是流媒体正常运行所必需的。