使用 Logstash CSV 过滤器不起作用

Question

我试图在 Logstash 上使用 CSV 过滤器，但它可以上传我的文件的值。我正在使用 Ubuntu Server 14.04、kibana 4、logstash 1.4.2 和 elasticsearch 1.4.4。接下来我展示我的 CSV 文件和我写的过滤器。我做错了什么吗？

CSV 文件：

Joao,21,555
Miguel,24,1000
Rodrigo,43,443
Maria,54,2343
Antonia,67,213

Logstash CSV 过滤器：

#Este e filtro que le o ficheiro e permite alocar os dados num index do Elasticsearch
input
{
    file
    {
       path => ["/opt/logstash/bin/testeFile_lite.csv"]
       start_position => "beginning"
       # sincedb_path => "NIL"
    }
}
filter
{
    csv
    {
        columns => ["nome", "idade", "salario"]
        separator => ","
    }
}
output
{
    elasticsearch
    {
        action => "index"
        host => "localhost"
        index => "logstash-%{+YYYY.MM.dd}"
    }
    stdout
    {
        codec => rubydebug
    }
}

当我执行过滤器时，出现：using milestone 2 input plugin 'file'... and using milestone 2 input plugin 'csv'...并且没有出现OK消息。

有人可以帮助我吗？

Answer 1

我解决了在输入文件中添加字段 sincedb_path 的问题。

这是 Logstash CSV 过滤器：

input
{
      file
        {
           path => "/opt/logstash/bin/testeFile_lite.csv"
           type => "testeFile_lite"
           start_position => "beginning"
           sincedb_path => "/opt/logstash/bin/dbteste"
        }
}
filter
{
    csv
      {
           columns => ['nome', 'idade', 'salario']
           separator => ","
      }

}
output
{
    elasticsearch
    {
       action => "index"
       host => "localhost"
       index => "xpto"
       cluster => "SIC_UTAD"
    }

    stdout
    {
        codec => rubydebug
    }
}

使用 Logstash CSV 过滤器不起作用

Use Logstash CSV filter doesn't work

csv

logstash

elastic-stack