zoukankan      html  css  js  c++  java
  • MySQL内存分配

                                 mysql内存分配
                   
    1.MySQL内存申请公式:
        1.1 per-thread buffers:
            每个线程缓冲内存针对每个线程连接分配的。每个线程的connection buffer和result buffer
        开始是给定net_buffer_length大小,可以动态增长到max_allowed_packet字节的大小。在使用过程
        中result buffer每个语句执行完成以后会收缩到net_buffer_length字节大小。
        每个连接线程的计算公式:
        
            (read_buffer_size+read_rnd_buffer_size+sort_buffer_size+thread_stack+
            join_buffer_size+binlog_cache_size)*max_connections=total memory for all connections
            这个内存使用叫:MySQL Thread Buffers(MTB)
        1.2 global buffers:
            global buffer与每个线程分配的内存没有多大关系。当进程启动,预留的内存资源,直到服务器
        关闭。这个内存叫MySQL Global Buffers(MGB)
        1.3 总的内存申请
            总的内存申请大小为: MTB+MGB=Total Memory Used by MySQL
        
        1.4 参数说明:
         read_buffer_size:
            每个线程每一次顺序扫描MyISAM表所申请的内存,该值默认为131072字节。该值应该为4K
        整数倍,如果不为4K的整数倍会向下取值为4K的整数倍。这部分内存主要用于当需要顺序读取
        数据的时候,如无法使用索引的情况下的全表扫描,全索引扫描等。在这种时候,MySQL 按照
        数据的存储顺序依次读取数据块,每次读取的数据快首先会暂存在read_buffer_size中,当 
        buffer 空间被写满或者全部数据读取结束后,再将buffer中的数据返回给上层调用者,以提高效率.
        该选项也被所有的村粗引擎使用:
           (1)当使用order by 排序时候会缓存临时文件中的索引。
           (2)bulk insert into partitions操作。
           (3)缓存内嵌或者嵌套的查询结果。
           
        read_rnd_buffer_size:
            和顺序读取相对应,当 MySQL 进行非顺序读取(随机读取)数据块的时候,会利用这个
        缓冲区暂存读取的数据。如根据索引信息读取表数据,根据排序后的结果集与表进行Join等等。
        总的来说,就是当数据块的读取需要满足一定的顺序的情况下,MySQL 就需要产生随机读取,
        进而使用到 read_rnd_buffer_size 参数所设置的内存缓冲区。
        
        thread_stack:
            主要用来存放每一个线程自身的标识信息,如线程id,线程运行时基本信息等等,
        我们可以通过 thread_stack 参数来设置为每一个线程栈分配多大的内存。
        
        join_buffer_size:
            应用程序经常会出现一些两表(或多表)Join的操作需求,MySQL在完成某些 Join 需求的时候(all/index join),
        为了减少参与Join的“被驱动表”的读取次数以提高性能,需要使用到 Join Buffer 来协助完成 Join操作。
        当 Join Buffer 太小,MySQL 不会将该 Buffer 存入磁盘文件,而是先将Join Buffer中的结果集与需要 Join 的表进行 Join 操作,
        然后清空 Join Buffer 中的数据,继续将剩余的结果集写入此 Buffer 中,如此往复。这势必会造成被驱动表需要被多次读取,
        成倍增加 IO 访问,降低效率。
        
        sort_buffer_size:
            MySQL 用此内存区域进行排序操作(filesort),完成客户端的排序请求。
        当我们设置的排序区缓存大小无法满足排序实际所需内存的时候,
        MySQL 会将数据写入磁盘文件来完成排序。由于磁盘和内存的读写性能完全不在一个数量级,
        所以sort_buffer_size参数对排序操作的性能影响绝对不可小视。经常使用索引来完成排序操作。
        
        主库执行:
        SQL>select sum(a.variable_value)/1024  kb from global_variables a 
        where a.variable_name in
        ('read_buffer_size','read_rnd_buffer_size',
        'sort_buffer_size','thread_stack',
        'join_buffer_size','binlog_cache_size');
        ---------------------------------------------
        38144
        
        SQL>select * from global_variables a where a.variable_name ='max_connections';
        ---------------------------------------------
        MAX_CONNECTIONS    1500
        
        SQL>select 38144*1500/1024/1024;
        -----------------------------------------
        54.56542969(这是计算线程需要的内存大小)
        
  • 相关阅读:
    【转】小波与小波包、小波包分解与信号重构、小波包能量特征提取 暨 小波包分解后实现按频率大小分布重新排列(Matlab 程序详解)
    IPython:一种交互式计算和开发环境
    python防止字符串转义
    Could not find a version that satisfies the requirement numpy>=1.7.0 (from pan das==0.17.0) (from versions: ) No matching distribution found for numpy>=1.7.0 (from pandas==0.17.0)
    【转】出现“ValueError : numpy.ufunc has the wrong size, try recompiling" 解决方法
    【转】最简单的安装pip的方法
    小波变换教程(十七)
    小波变换补充知识
    小波变换教程(十六)
    C# 保护进程不被结束(源代码)防任务管理器结束进程
  • 原文地址:https://www.cnblogs.com/innobase/p/4609703.html
Copyright © 2011-2022 走看看