zoukankan      html  css  js  c++  java
  • ELK logstash 处理MySQL慢查询日志

    在生产环境下,logstash 经常会遇到处理多种格式的日志,不同的日志格式,解析方法不同。下面来说说logstash处理多行日志的例子,对MySQL慢查询日志进行分析,这个经常遇到过,网络上疑问也很多。

    MySQL慢查询日志格式如下:

    filebeat配置

    我这里是使用filebeat 1.1.1版本的,之前版本没有multiline配置项,具体方法看后面那种。

    logstash配置

    1. input段配置

    2. filter 段配置

    关键之重是grok正则的配置。

    3. output段配置

    标准输出结果截图

    Elasticsearch

    elasticsearch结果截图

    Elasticsearch

    Elasticsearch

    如果是使用filebeat1.1.1之前的版本,配置如下:

    1. filebeat配置

    2. logstash input段配置

    其它配置不变。

    如有疑问跟帖,或者加群沟通。

  • 相关阅读:
    常见WINDOWS运行命令
    CSDN Blog 之七宗罪
    常见进程大全
    开始→运行→输入的命令集锦(网上搜来的)
    20200527:SpringCloud用了那些组件?分布式追踪链怎么做的?熔断器工作原理?
    20200520:分库分表后如何迁移?
    20200523:如何实现并发限流
    20200521:es底层读写原理?倒排索引原理?
    20200525:MQ应用场景、Kafka和rabbit区别?kafka为什么支撑高并发? 来自
    20200519:催收核心业务是什么?
  • 原文地址:https://www.cnblogs.com/cheyunhua/p/8609604.html
Copyright © 2011-2022 走看看