0

Facebook 的 HiPal 数据分析工具有哪些知识管理功能,它是如何工作的?它是纯粹为 hadoop 环境构建的还是可以与其他数据库一起使用?

4

2 回答 2

2

虽然这只是猜测,因为 HiPal 尚未向公众发布。

HiPal 是一个名为 HIVE 的类 SQL 程序的 UI。Hive 是一个程序,它允许您对 Hadoop 文件系统中的文件运行类似 SQL 的查询。Hadoop 是用于大型(数 TB)数据集的分布式 map/reduce 架构。

但由于它不是开源的,我们无法掌握它。但这不会用于其他数据库系统。

http://www.facebook.com/note.php?note_id=89508453919

于 2012-06-28T14:23:24.000 回答
0

Facebook 使用 Hive ( http://borthakur.com/ftp/hadoopworld.pdf ) 来处理数据。Hive 是一个类似 SQL 的框架接口,运行在 Hadoop 之上,由 Facebook 团队自己创建,后来捐赠给 apache 社区。

他们说他们使用 Hive/Hadoop 分析了 20 PB 的数据。

这是一个快速入门指南: https ://cwiki.apache.org/confluence/display/Hive/GettingStarted

于 2013-08-30T13:01:45.287 回答