我正在使用 fscrawler 创建 7TB 以上的数据索引。索引开始正常,但当索引大小达到 2.6gb 时停止。我相信这是一个内存问题,我该如何配置内存?
我的机器内存是 40GB,我已经为 elasticsearch 分配了 12GB。
我正在使用 fscrawler 创建 7TB 以上的数据索引。索引开始正常,但当索引大小达到 2.6gb 时停止。我相信这是一个内存问题,我该如何配置内存?
我的机器内存是 40GB,我已经为 elasticsearch 分配了 12GB。
您可能还必须使用FS_JAVA_OPTS
. 喜欢:
FS_JAVA_OPTS="-Xmx4g -Xms4g" bin/fscrawler