zoukankan      html  css  js  c++  java
  • kibana上传日志时间与日志里面的时间不同

    中间加了一层转换,日志从filebeat采集进入logstash,然后将日志中的时间字段覆盖到es的@timestamp字段,kibana会将这个字段当做是日志的上传时间

    input {
      beats {
        port => 10515
      }
    }
    
    filter{
      if "xxx" in [tags]{
        grok {
            match => ["message","%{TIMESTAMP_ISO8601:log.date}"]
        }
        date {
            match => ["log.date", "yyyy-MM-dd HH:mm:ss,SSS"]
            target => "@timestamp"
        }
      }
      if "xxx" in [tags]{
        grok {
            match => ["message","%{TIMESTAMP_ISO8601:timestamp8601}"]
        }
        date {
            match => ["timestamp8601", "yyyy-MM-dd HH:mm:ss.SSS"]
            target => "@timestamp"
        }
      }
      if "xxx" in [tags]{
        grok {
            match => ["message","%{TIMESTAMP_ISO8601:timestamp8601}"]
        }
        date {
            match => ["timestamp8601", "yyyy-MM-dd HH:mm:ss.SSS"]
            target => "@timestamp"
        }
      }
    
    }
    
    output {
      if "xxx" in [tags]{
         elasticsearch {
           hosts => ["http://xxx:9200"]
           #index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
           index => "xxx-%{+YYYY.MM}"
           user => "xxx"
           password => "xxx"
         }
      }
    
      if "xxx" in [tags]{
         elasticsearch {
           hosts => ["http://xxx:9200"]
           #index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
           index => "xxx-%{+YYYY.MM}"
           user => "xxx"
           password => "xxx"
         }
      }
      if "xxx" in [tags]{
         elasticsearch {
           hosts => ["http://xxx:9200"]
           #index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
           index => "xxx-%{+YYYY.MM}"
           user => "xxx"
           password => "xxx"
         }
      }
    
    }
    

      

  • 相关阅读:
    办公室搞笑记(2) 李姐
    世界上疼我的人又少了一个
    带给杨帆的祝福:)
    火:) 火:) 火:)
    我们都是享受寂寞的孩子:)
    복 경 에 갑 니 다 :) 去北京.
    너는 겨울이 좋아요 .我喜欢冬天:)
    2007年:新年,新开始:)
    Nginx 泛域名配置方式
    数据库设计 从零开始系列之一
  • 原文地址:https://www.cnblogs.com/bill2014/p/15040986.html
Copyright © 2011-2022 走看看