Kibana 管理中未显示索引模式

Question

正在使用 ELK Stack ver 7.3.2 Linux RedHat 6.9 (Santiago) Kafka Client 2.1
将 kafka-input-plugin 与 Logstash 结合使用。
Kibana 已启动运行ning。
弹性搜索配置为运行和 Kibana。
Kibana 运行与 Elastic 搜索在同一个 VM 上。
心跳运行ning.
Filebeat 是运行ning.
Logstash 输入是 Kafka 主题并配置为输出到 Elastic。

我看不到应该由 Elastic 生成并放在 Kibana 上的索引。

这是 Logstash 的简单配置

input {
  kafka {
    bootstrap_servers => "nydvalkafvm01.tradeware.com:9092"
    topics => ["cat.dev1.service.NJPW7DT004.SM1"]
  }
}

output {
  elasticsearch {
    hosts => ["http://nyuatalcasvm01:9200"]
    index => "test_boris"
    workers => 1
    #user => "elastic"
    #password => "changeme"
  }
}

这是控制台输出

[2019-09-20T22:02:00,444][INFO ][org.apache.kafka.clients.consumer.internals.ConsumerCoordinator] [Consumer clientId=logstash-0, groupId=logstash] Revoking previously assigned partitions []
[2019-09-20T22:02:00,445][INFO ][org.apache.kafka.clients.consumer.internals.AbstractCoordinator] [Consumer clientId=logstash-0, groupId=logstash] (Re-)joining group
[2019-09-20T22:02:00,506][INFO ][logstash.agent           ] Successfully started Logstash API endpoint {:port=>9600}
[2019-09-20T22:02:00,521][INFO ][org.apache.kafka.clients.consumer.internals.AbstractCoordinator] [Consumer clientId=logstash-0, groupId=logstash] Successfully joined group with generation 13
[2019-09-20T22:02:00,522][INFO ][org.apache.kafka.clients.consumer.internals.ConsumerCoordinator] [Consumer clientId=logstash-0, groupId=logstash] Setting newly assigned partitions [cat.dev1.service.NJPW7DT004.SM1-0, cat.dev1.service.NJPW7DT004.SM1-1]

我希望在 Kibana 管理中看到索引 'test_boris' 配置中是否缺少某些内容？

Answer 1

在 logstash 处理最终出现在索引中的事件之前，不会创建索引。所以根本问题很可能是kafka主题没有任何内容。

Kibana 管理中未显示索引模式

Index pattern is not showing up in Kibana management

elasticsearch

logstash

kibana-7