0

我之前使用的是现在已弃用的 mapper-attachments 插件,它与普通索引一起使用相当容易。现在 ingest-attachment 已经取代了它并需要管道等。如何正确使用它变得令人困惑。

假设我有一个名为 的模型Media,它有一个file包含 base64 编码文件的字段。我在该文件中有以下映射:

mapping '_source' => { :excludes => ['file'] } do
  indexes :id, type: :long, index: :not_analyzed
  indexes :name, type: :text
  indexes :visibility, type: :integer, index: :not_analyzed
  indexes :created_at, type: :date, include_in_all: false
  indexes :updated_at, type: :date, include_in_all: false

  # attachment specific mappings
  indexes 'attachment.title', type: :text, store: 'yes'
  indexes 'attachment.author', type: :text, store: 'yes'
  indexes 'attachment.name', type: :text, store: 'yes'
  indexes 'attachment.date', type: :date, store: 'yes'
  indexes 'attachment.content_type', type: :text, store: 'yes'
  indexes 'attachment.content_length', type: :integer, store: 'yes'
  indexes 'attachment.content', term_vector: 'with_positions_offsets', type: :text, store: 'yes'
end

我通过 curl 创建了一个附件管道:

curl -XPUT 'localhost:9200/_ingest/pipeline/attachment' -d'
{
  "description" : "Extract attachment information",
  "processors" : [
    {
      "attachment" : {
        "field" : "file"
      }
    }
  ]
}'

现在,以前一个简单的Media.last.__elasticsearch__.index_document就足以file通过mapper-attachments插件索引记录以及实际记录。

我不确定如何ingest-attachment使用管道和elasticsearch-railsgem 来做到这一点。

我可以通过 curl 执行以下 PUT:

curl -XPUT 'localhost:9200/assets/media/68?pipeline=attachment' -d'
{ "file" : "my_really_long_encoded_file_string" }'

这将索引编码文件,但显然它不会索引模型的其余数据(或者如果它之前被索引,则完全覆盖它)。我真的不想在 curl 命令中包含每个模型属性以及文件。有没有更好或更简单的方法来做到这一点?我是否完全没有管道并且摄取应该工作?

4

1 回答 1

1

终于想通了。我需要更新 ES gems,特别是 elasticsearch-api。

使用我拥有的映射和​​管道集,您可以轻松地执行以下操作:

Media.last.__elasticsearch__.index_document pipeline: :attachment

或者

Media.last.__elasticsearch__.update_document pipeline: :attachment

这将正确索引所有内容,并且您的文件将通过摄取管道正确解析和索引。

于 2016-12-08T15:01:09.590 回答