serialization - 协议缓冲区和 Hadoop

Question

我是 Hadoop 世界的新手。我知道 Hadoop 有自己的序列化机制，称为 Writables。AVRO 是另一个这样的库。我想知道我们是否可以使用 Google 的协议缓冲区序列化来编写 map-reduce 作业？如果是的话，那么有人可以指出一个很好的例子来让我开始。

Answer 1

Twitter 发布了他们的大象鸟库，它允许 hadoop 使用协议缓冲区文件。