问题标签 [elasticsearch-bulk-api]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
71 问题
0
投票
1
回答
46
浏览
python - Python 中 Elasticsearch 的高效批量加载选项
我正在尝试使用 Python 将大量数据摄取到 Elasticsearch 中。为此，我正在使用批量 API 帮助程序，并且我开发了一个看起来像这样的函数，
这是实际摄取发生的部分，
现在，我的每个文档都包含大量数据（我有几个字段是大字符串），我注意到这个摄取过程非常缓慢。我正在分块摄取数据，索引 10000 个文档需要一分钟多一点的时间。
有没有更有效的方法来做到这一点？我正在努力使这个过程更快。