MySQL性能分析脚本

#!/usr/bin/python
#!coding:utf-8

import mysql.connector as connector
import json


"""
目标       ：       这个工具用于分析MySQL实例的性能问题
作者       ：       蒋乐兴
QQ         ：       1721900707
版本信息   ：       基于python3.4 MySQL 5.7.11   
MySQL用户要用到的一些权限：
    create user admin@'127.0.0.1' identified by '131417';  
    grant select on performance_schema.* to admin@'localhost';   
"""


show_golbal_value="select variable_name,variable_value from performance_schema.global_variables where variable_name= %s"
show_global_statu="select variable_name,variable_value from performance_schema.global_status where variable_name= %s"


def analyse_innodb_cache(cursor,results):
    '''
    用于分析innodb_buffer_pool的缓存命中率
    '''
    #查询出innodb_buffer_pool_read_requests
    cursor.execute(show_global_statu,('Innodb_buffer_pool_read_requests',))
    key,value=cursor.fetchone()
    innodb_buffer_pool_read_requests=value
    #查询出Innodb_buffer_pool_reads
    cursor.execute(show_global_statu,('Innodb_buffer_pool_reads',))
    key,value=cursor.fetchone()
    Innodb_buffer_pool_reads=value
    #计算结果
    innodb_buffer_pool_hit_rate=float(innodb_buffer_pool_read_requests)/(float(innodb_buffer_pool_read_requests)+float(Innodb_buffer_pool_reads))
    #组织结果
    tempResult={}
    tempResult['innodb_buffer_pool_read_requests']=innodb_buffer_pool_read_requests
    tempResult['Innodb_buffer_pool_reads']=Innodb_buffer_pool_reads
    tempResult['innodb_buffer_pool_hit_rate']=innodb_buffer_pool_hit_rate

    results['innodb_buffer_pool_hit_rate']=tempResult




def analyse_query_no_use_index(curosr,results):
    """
    用于分析没有用索引的查询,最多只返回8条没有使用索引的SQL;执行次数越多的SQL在结果集中越靠前。
    """
    query="select digest_text,sum_no_index_used from performance_schema.events_statements_summary_by_digest where sum_no_index_used>=1 and digest_text not like 'SHOW%' order by  sum_no_index_used desc limit 8"
    cursor.execute(query)
    index=0
    tempResult={}
    for digest_text,sum_no_use_index in curosr:
        tempResult[index]=digest_text
        index=index+1
    results['analyse_query_no_use_index']=tempResult




def analyse_query_cache(cursor,results):
    """
    本函数用于分析mysql实例的查询缓存、如果query_cache_type=0说明没有开启这个工能，那么分析结束。
    不然要分析查询缓存的剩余内存，和命中率。把分析的结果包装到results变量中。
    """
    analysis_var=("query_cache_type",)
    cursor.execute(show_golbal_value,analysis_var)
    key,value=cursor.fetchone()
    #如果value的值等于OFF、说明本实例并没有开启查询缓存。
    if value=='OFF':
        results['query_cache']='query cache function not in use for this instance'
    else:
        #如果逻辑走到了这里说明、实例开启了查询缓存
        #Qcache_free_memory 对应着剩余的查询缓存内存。
        cursor.execute(show_global_statu,("Qcache_free_memory",))
        key,value = cursor.fetchone()
        #由于这个是延时计算的；所以查出来就要把它用掉。********************
        Qcache_free_memory=value
        #query_cache_size   对应着查询缓存的内存大小。
        cursor.execute(show_golbal_value,("query_cache_size",))
        key,value = cursor.fetchone();
        query_cache_size=value
        #用于查询缓存的内存空闲率
        if float(query_cache_size) != 0:
            query_cache_memory_free_rate=float(Qcache_free_memory)/float(query_cache_size)
        else:
            query_cache_memory_free_rate=None
        #Qcache_hits    对应着命中的次数
        cursor.execute(show_global_statu,("Qcache_hits",))
        key,value=cursor.fetchone()
        Qcache_hits=value
        #Qcache_inserts 对应的没有命中的次数----由于没有命中所以要插入。
        cursor.execute(show_global_statu,("Qcache_inserts",))
        key,value=cursor.fetchone()
        Qcache_inserts=value
        #查询缓存的命中率为
        if float(Qcache_hits+Qcache_inserts) != 0:
            query_cache_hit_rate=float(Qcache_hits)/float(Qcache_hits+Qcache_inserts)
        else:
            query_cache_hit_rate=None
        #组织结果
        tempResult={}
        tempResult['Qcache_free_memory']=Qcache_free_memory
        tempResult['query_cache_size']=query_cache_size
        tempResult['query_cache_memory_free_rate']=query_cache_memory_free_rate
        tempResult['Qcache_hits']=Qcache_hits
        tempResult['Qcache_inserts']=Qcache_inserts
        tempResult['query_cache_hit_rate']=query_cache_hit_rate
        results['query_cache']=tempResult


analysis_function_sets={
    'anaylsis_query_cache':analyse_query_cache,
    'analyse_query_no_use_index':analyse_query_no_use_index,
    'analyse_innodb_cache':analyse_innodb_cache
    }


if __name__=="__main__":
    cnx=None
    cursor=None
    config={
        'host':'127.0.0.1',
        'port':3306,
        'user':'admin',
        'password':'131417'
        }
    results={}
    try:
        cnx=connector.connect(**config)
        cursor=cnx.cursor(buffered=True)
        for key,function in analysis_function_sets.items():
            print('start analyse {0}'.format(key))
            function(cursor,results)
        print(json.dumps(results))
    except Exception as err:
        print(err)
    finally:
        if cnx != None:
            cnx.close()
            cursor.close()