0

Basic是一个浮点字段。提到的索引在弹性搜索中不存在。使用 运行配置文件时logstash -f,我也不例外。然而,在 elasticsearch 中反映和输入的数据显示为Basicas的映射string。我该如何纠正这个问题?以及如何为多个字段执行此操作?

input {  
      file {
          path => "/home/sagnik/work/logstash-1.4.2/bin/promosms_dec15.csv"
          type => "promosms_dec15"
          start_position => "beginning"
          sincedb_path => "/dev/null"
      }
}
filter {
    grok{
        match => [
            "Basic", " %{NUMBER:Basic:float}"
        ]
    }

    csv {
        columns => ["Generation_Date","Basic"]
        separator => ","
    }  
    ruby {
          code => "event['Generation_Date'] = Date.parse(event['Generation_Date']);"
    }

}
output {  
    elasticsearch { 
        action => "index"
        host => "localhost"
        index => "promosms-%{+dd.MM.YYYY}"
        workers => 1
    }
}
4

1 回答 1

3

你有两个问题。首先,您的 grok 过滤器列在 csv 过滤器之前,并且因为应用过滤器是为了在应用 grok 过滤器时不会有“基本”字段来转换。

其次,除非您明确允许,否则 grok 不会覆盖现有字段。换句话说,

grok{
    match => [
        "Basic", " %{NUMBER:Basic:float}"
    ]
}

将永远是无操作的。指定overwrite => ["Basic"]或最好使用mutate的类型转换功能:

mutate {
    convert => ["Basic", "float"]
}
于 2014-12-18T15:53:14.523 回答