1

我正在测试我的设置，我需要将 hdfs 中的数据移动到 sql DB，并且在生成数据时也是如此。我的意思是.. 一旦 mapreduce 作业完成，它将发送一条 ActivMQ 消息。一旦我使用 Sqoop 收到 ActivMQ 消息，我需要将其自动移动到 sql。有人可以帮助如何实现这一目标。

有人可以让我知道 MQ 和 Sqoop 是否一起工作..？

谢谢你..

4

1 回答 1

0

我对用例并不完全清楚，但您可以设置 Ooizie 工作流程。Sqoop 作业只有在 map-reduce 作业完成后才会启动。您实际上可以使用 Oozie 创建复杂的 DAG。Oozie 工作流程反过来可以从远程 java 客户端调用。希望这有帮助。

于 2016-06-27T08:24:14.977 回答