我们可以将 Hadoop 仅用于日志记录还是仅用于报告？所以我可以尝试不同的事情，比如使用 scribe 进行日志记录和使用 Hadoop 进行报告。
问问题
378 次
2 回答
1
Hadoop 兼具经济存储和强大的数据分析功能。HDFS 是放置日志等的好地方，因为与其他解决方案相比，它的每 TB 价格非常低。另外，当您的数据在 HDFS 中时，它可以通过 MapReduce 轻松访问。Hadoop 的全部内容也是，您不应该丢弃数据。您应该收集所有这些信息，并通过 MapReduce 开始分析它并获得您原本不会拥有的洞察力。
于 2011-12-05T13:36:02.517 回答
1
你已经回答了这个问题，有像水槽，抄写员这样的项目可以帮助你收集日志，你可以对它进行聚合。其他项目也可以参考以下
http://blog.treasure-data.com/post/13766262632/real-time-log-collection-with-fluentd-and-mongodb
http://incubator.apache.org/projects/flume.html
于 2011-12-05T07:26:47.890 回答