1

我有这个 我应该为大数据实现的Fanmod算法。

我想知道使用 Hadoop/Mapreduce 是否有效。

如果没有,那么您能否给我一些有效解决此问题的提示?

4

1 回答 1

0

您可能已经熟悉使用 Hadoop 进行大规模网络中的 SAHAD 子图分析,其中他们使用 Hadoop 成功执行了网络主题分析。

说 Hadoop 不能执行迭代处理并不十分准确……只是在 Hadoop 中更难。我建议阅读此链接:Hadoop 中的迭代算法以获取更多信息,但简而言之,Hadoop 中的迭代处理需要将作业背靠背链接在一起。

根据您的要求(子图搜索),这似乎是使用 Hadoop 和 MR 框架的合理用例。

或者,如果您需要持续的迭代处理并且 MR 没有解决它,您可以使用 Storm on Hadoop HDFS。

于 2014-03-17T19:08:57.827 回答