我正在尝试在我的 3 节点测试集群上对 Accumulo 进行基准测试。我已经编写了一个 map reduce 作业,它从弹性搜索集群中读取 json 文档并以累积的形式摄取它们。当我开始摄取过程时,摄取率很高,但逐渐降低,我得到以下曲线。这条曲线与我所有获取数据的尝试一致。
我想知道这背后的原因。我启用了预拆分,并根据我的数据集对其进行了优化。
我在集群上安装了 Accumulo 1.6.1 和 Hadoop 2.2。
我正在尝试在我的 3 节点测试集群上对 Accumulo 进行基准测试。我已经编写了一个 map reduce 作业,它从弹性搜索集群中读取 json 文档并以累积的形式摄取它们。当我开始摄取过程时,摄取率很高,但逐渐降低,我得到以下曲线。这条曲线与我所有获取数据的尝试一致。
我想知道这背后的原因。我启用了预拆分,并根据我的数据集对其进行了优化。
我在集群上安装了 Accumulo 1.6.1 和 Hadoop 2.2。