问题标签 [flume-twitter]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
hadoop - 面临水槽和 hadoop 连接的问题
我已经在我的系统中安装并安装了 Flume 1.9.0,我正在尝试使用 Flume 研究 Twitter 帐户的数据摄取。但我面临以下问题:
谁能指导我做错了什么。为此,我遵循了以下链接,但仍然遇到同样的问题。
https://www.guru99.com/create-your-first-flume-program.html
请指导那里有什么错误以及我可以解决它的任何链接,我完全是初学者。
hadoop - 使用 apache flume 的 Twitter 流数据出错
我正在从事一项与 Hadoop 和水槽相关的小任务。我正在尝试使用水槽获取 Twitter 数据,但出现以下错误
错误 node.AbstractConfigurationProvider:由于配置过程中的错误,已删除 Sink HDFS java.lang.InstantiationException:定义了不兼容的接收器和通道设置。sink 的批量大小大于通道事务容量。Sink:HDFS,批量大小 = 1000,通道 MemChannel,事务容量 = 100
flume_twitter.conf
水槽-env.sh
下面的命令用于运行文件
flume-ng 代理 –conf ./conf/ -f ../conf/flume_twitter.conf -Dflume.root.logger=DEBUG,console -n TwitterAgent
我也尝试过以下命令
flume-ng 代理 TwitterAgent -f ../conf/flume_twitter.conf
我已经尝试了很多方法,几乎所有堆栈溢出的引用都
可以帮助我解决这个错误
提前谢谢!