zoukankan      html  css  js  c++  java
  • MySQL慢查询日志分析详解

    MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。long_query_time的默认值为10,意思是运行10S以上的语句。默认情况下,Mysql数据库并不启动慢查询日志,需要我们手动来设置这个参数,当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件,也支持将日志记录写入数据库表。

    MySQL慢查询定义
    分析MySQL语句查询性能的方法除了使用 EXPLAIN 输出执行计划,还可以让MySQL记录下查询超过指定时间的语句,我们将超过指定时间的SQL语句查询称为“慢查询”。

    MySQL慢查询的体现
    慢查询主要体现在慢上,通常意义上来讲,只要返回时间大于 >1 sec上的查询都可以称为慢查询。慢查询会导致CPU,内存消耗过高。数据库服务器压力陡然过大,那么大部分情况来讲,肯定是由某些慢查询导致的。

    mysql慢查询开启
    1.查看当前慢查询设置情况

    #查看慢查询时间,默认10s,建议降到1s或以下
    mysql> show variables like "long_query_time";
    +-----------------+----------+
    | Variable_name | Value |
    +-----------------+----------+
    | long_query_time | 1.000000 |
    +-----------------+----------+
    1 row in set (0.00 sec)

    #查看慢查询配置情况,其中,slow_query_log的值是on就是已开启功能了。
    mysql> show variables like "%slow%";
    +-----------------------------------+----------------------+
    | Variable_name | Value |
    +-----------------------------------+----------------------+
    | log_slow_admin_statements | OFF |
    | log_slow_filter | |
    | log_slow_rate_limit | 1 |
    | log_slow_rate_type | session |
    | log_slow_slave_statements | OFF |
    | log_slow_sp_statements | ON |
    | log_slow_verbosity | |
    | max_slowlog_files | 0 |
    | max_slowlog_size | 0 |
    | slow_launch_time | 2 |
    | slow_query_log | ON |
    | slow_query_log_always_write_time | 10.000000 |
    | slow_query_log_file | /tmp/slow_querys.log |
    | slow_query_log_use_global_control | |
    +-----------------------------------+----------------------+
    14 rows in set (0.01 sec)

    2.如何开启慢查询功能
    方法一:在服务器上找到mysql的配置文件my.cnf , 然后再mysqld模块里追加一下内容,这样的好处是会一直生效,不好就是需要重启mysql进程。

    vim my.cnf
    [mysqld]
    slow_query_log = ON
    #定义慢查询日志的路径
    slow_query_log_file = /tmp/slow_querys.log
    #定义查过多少秒的查询算是慢查询,我这里定义的是1秒,5.6之后允许设置少于1秒,例如0.1秒
    long_query_time = 1
    #用来设置是否记录没有使用索引的查询到慢查询记录,默认关闭,看需求开启,会产生很多日志,可动态修改
    #log-queries-not-using-indexes
    管理指令也会被记录到慢查询。比如OPTIMEZE TABLE, ALTER TABLE,默认关闭,看需求开启,会产生很多日志,可动态修改
    #log-slow-admin-statements

    然后重启mysql服务器即可,这是通过一下命令看一下慢查询日志的情况:

    tail -f /tmp/slow_querys.log
    1
    方法二:通过修改mysql的全局变量来处理,这样做的好处是,不用重启mysql服务器,登陆到mysql上执行一下sql脚本即可,不过重启后就失效了。

    #开启慢查询功能,1是开启,0是关闭
    mysql> set global slow_query_log=1;
    #定义查过多少秒的查询算是慢查询,我这里定义的是1秒,5.6之后允许设置少于1秒,例如0.1秒
    mysql> set global long_query_time=1;
    #定义慢查询日志的路径
    mysql> set global slow_query_log_file='/tmp/slow_querys.log';
    #关闭功能:set global slow_query_log=0;
    然后通过一下命令查看是否成功
    mysql> show variables like 'long%';
    mysql> show variables like 'slow%';
    #设置慢查询记录到表中
    #set global log_output='TABLE';

    特别要注意的是long_query_time的设置,5.6之后支持设置低于0.1秒,所以记录的详细程度,就看你自己的需求,数据库容量比较大的,超过0.1秒还是比较多,所以就变得有点不合理了。

    MYSQL慢查询日志的记录定义
    直接查看mysql的慢查询日志分析,比如我们可以tail -f slow_query.log查看里面的内容

    tail -f slow_query.log
    # Time: 110107 16:22:11
    # User@Host: root[root] @ localhost []
    # Query_time: 9.869362 Lock_time: 0.000035 Rows_sent: 1 Rows_examined: 6261774
    SET timestamp=1294388531;
    select count(*) from ep_friends;

    字段意义解析:

    第一行,SQL查询执行的时间 第二行,执行SQL查询的连接信息,用户和连接IP 第三行,记录了一些我们比较有用的信息,如下解析:
    - Query_time,这条SQL执行的时间,越长则越慢
    - Lock_time,在MySQL服务器阶段(不是在存储引擎阶段)等待表锁时间
    - Rows_sent,查询返回的行数
    - Rows_examined,查询检查的行数,越长就当然越费时间
    第四行,设置时间戳,没有实际意义,只是和第一行对应执行时间。
    第五行及后面所有行(第二个# Time:之前),执行的sql语句记录信息,因为sql可能会很长。

    MYSQL慢查询日志分析方法
    虽然慢查询日志已经够清晰,但是往往我们的日志记录到的不是只有一条sql,可能有很多很多条,如果不加以统计,估计要看到猴年马月,这个时候就需要做统计分析了。

    方法一:使用mysql程序自带的mysqldumpslow命令分析
    例如:
    mysqldumpslow -s c -t 10 /tmp/slow-log
    这会输出记录次数最多的10条SQL语句,得出的结果和上面一般慢查询记录的格式没什么太大差别,这里就不展开来详细解析了。

    参数解析:

    参数解析:
    -s:是表示按照何种方式排序,子参数如下:
    c、t、l、r:分别是按照记录次数、时间、查询时间、返回的记录数来排序,
    ac、at、al、ar:表示相应的倒叙;
    -t:返回前面多少条的数据,这里意思就是返回10条数据了(也可以说是前十)
    -g:后边可以写一个正则匹配模式,大小写不敏感的,比如:
    /path/mysqldumpslow -s r -t 10 /tmp/slow-log,得到返回记录集最多的10个查询。
    /path/mysqldumpslow -s t -t 10 -g “left join” /tmp/slow-log,得到按照时间排序的前10条里面含有左连接的查询语句。


    方法二:使用pt(Percona Toolkit)工具的pt-query-digest进行统计分析。
    这个是由Percona公司出品的一个用perl编写的脚本,只有安装上pt工具集才会存在,有兴趣的朋友就要先安装pt工具了。直接分析慢查询文件,执行如下:

    pt-query-digest slow_querys.log >t.txt


    因为记录里还是可能有很多sql在,看起来还是费劲,所以建议输出到文件来看了,具体不多过多介绍。

    参考资料: https://blog.csdn.net/enweitech/article/details/80239189
    https://blog.51cto.com/arthur376/1948944

    原文链接:https://blog.csdn.net/mr_lisj/java/article/details/93867681

     
  • 相关阅读:
    POJ 3669 Meteor Shower【BFS】
    用于JS日期格式化,以及简单运算的Date包装工具类
    asp+jQuery解决中文乱码
    jQuery制作信息提示弹出层插件【推荐】
    让 SyntaxHighlighter 3.x 支持 Lua 语法着色
    JQuery操作TABLE,及console.info问题。
    可加装广告的swf播放器JS代码
    Java 绘制环形的文字 (Circle Text Demo)
    Java数据库操作类演示
    Java 通过 HTTP 下载文件
  • 原文地址:https://www.cnblogs.com/yangfei123/p/12651543.html
Copyright © 2011-2022 走看看