我需要创建一个简单的数据仓库。数据仓库的数据源是异构的,因此我正在尝试使用 Apache Flume 等框架进行数据收集。我浏览了文档,但没有找到任何关于 SQL 的信息。(http://flume.apache.org/FlumeDeveloperGuide.html和http://flume.apache.org/FlumeUserGuide.html#flume-sources)
问题:是否有任何(本机)可能性将 Apache Flume 源连接到 SQL 服务器?
我需要创建一个简单的数据仓库。数据仓库的数据源是异构的,因此我正在尝试使用 Apache Flume 等框架进行数据收集。我浏览了文档,但没有找到任何关于 SQL 的信息。(http://flume.apache.org/FlumeDeveloperGuide.html和http://flume.apache.org/FlumeUserGuide.html#flume-sources)
问题:是否有任何(本机)可能性将 Apache Flume 源连接到 SQL 服务器?
Apache Flume 旨在收集、聚合日志数据并将其移动到 HDFS。
如果您正在考虑从 SQL 数据库中移动大量数据,请查看 Apache Sqoop: http ://sqoop.apache.org/