zoukankan      html  css  js  c++  java
  • Logstash配置文件介绍

    Logstash配置文件介绍

    Logstash配置文件有两种,分别是pipeline配置文件和setting配置文件。

    Pipeline配置文件主要定义logstash使用的插件以及每个插件的设置,定义完成后使用 -f 参数来指定该配置文件。

    如以下定义的一个简单的配置文件:

    input { stdin { } }
    output {
      elasticsearch { hosts => ["localhost:9200"] }
      stdout { codec => rubydebug }
    }

    该配置文件使用两个插件,分别是 input 和 output。然后使用启动 logstash 时,使用 -f 参数来指定配置文件。

    Pipeline配置文件结构:

    input {
      ...
    }
    
    filter {
      ...
    }
    
    output {
      ...
    }

    Input:

    Input支持多种输入事件源,常用输入源如下:

    1、beats:

    Logstash从beats组件中获取数据

    input {
      beats {
        port => 5044
      }
    }
    
    output {
      elasticsearch {
        hosts => "localhost:9200"
        manage_template => false
        index => "%{[@metadata][beat]}-%{+YYYY.MM.dd}"
        document_type => "%{[@metadata][type]}"
      }
    }

    以上配置中,logstash在5044端口监听从beats组件中传来的数据源。beats组件在输出给logstash中配置logstash的主机ip和5044端口。

    2、elasticsearch:

    Logstash从elasticsearch中获取数据

    input {
      elasticsearch {
        hosts => "localhost"
        query => '{ "query": { "match": { "statuscode": 200 } }, "sort": [ "_doc" ] }'
      }
    }

    以上配置中,从elasticsearch中查询数据,然后作为数据源输入到logstash。

    3、file:

    Logstash从文本文件中获取数据

    path => "/var/log/*"

    直接在 path 中指定文本文件的位置,支持通配。

    4、支持多种输入源类型......

  • 相关阅读:
    VS开发工具 因插件问题导致 已停止工作 解决办法
    niceScroll 简单使用 及 插件API
    使用JQGrid 问题汇总 不定时更新
    H5特性 MutationObserver 监听元素 动态改变iframe高度
    UVALIVE 3972 March of the Penguins
    Codeforces #105 DIV2 ABCDE
    UVALIVE 3644 X-Plosives
    UVALIVE 3645 Objective: Berlin
    UVALIVE 3031 Cable TV Network
    UVALIVE 2927 "Shortest" pair of paths
  • 原文地址:https://www.cnblogs.com/ahaii/p/8404656.html
Copyright © 2011-2022 走看看