ELK stack + Filebeat для сбора журналов Rails

Question

Я установил стек ELK на виртуальной машине, и я хочу собирать журналы из некоторых приложений Ruby on Rails.

На каждой виртуальной машине, где у меня есть приложение Rails я установил Filebeat с этой конфигурации:

filebeat: 
    prospectors: 
    - 
     paths: 
     - path_to_rails_log_file.log 
     input_type: log 
     fields_under_root: true 
     fields: 
     tags: ['json'] 

output: 
    logstash: 
    hosts: ["192.168.1.232:5044"] 
    bulk_max_size: 1024 
    tls: 
     certificate_authorities: ["path_to_certificate.crt"] 

shipper: 
logging: 
    files: 
    rotateeverybytes: 10485760 # = 10MB 

На VM с стеком ELK я это 02-beats-input.conf:

input { 
    beats { 
    port => 5044 
    ssl => true 
    ssl_certificate => "/etc/pki/tls/certs/filebeat-forwarder.crt" 
    ssl_key => "/etc/pki/tls/private/filebeat-forwarder.key" 
    } 
} 

filter { 
if [tag][json] { 
    json { 
    source => "message" 
    } 
} 
} 
output { 
elasticsearch { 
    hosts => "localhost:9200" 
    manage_template => false 
    index => "%{[@metadata][beat]}-%{+YYYY.MM.dd}" 
    document_type => "%{[@metadata][type]}" 
} 
} 

Я не понимаю почему в веб-интерфейсе Kibana мои журналы выглядят так:

message: {"method":"GET","path":"/","format":"html","controller":"application","action":"index","status":200, "duration":7.91,"view":0.31,"db":0.0,"ip":"req_ip","route":"application#index","request_id":"some_id","source":"127.0.1.1","tags":["request"],"@timestamp":"2017-02-10T06:52:01.984Z","@version":"1"} @version:1 @timestamp:February 10th 2017, 08:52:10.451 offset:25,747 type:log tags:json, beats_input_codec_plain_applied beat.hostname:deployer-VirtualBox 

Я бы хотел ke, если возможно, каждая запись будет содержимым под ключевым «сообщением» без этого ключа.

Что я делаю неправильно? :(

P.S. Мои Rails журналы в формате JSON, и я читаю этот файл с Filebeat.

Answer 1

В Logstash конфиг вы, вероятно, следует заменить if [tag][json] { с if [tags][json] {