zoukankan      html  css  js  c++  java
  • mysql中大数据表alter增加字段报错:"1034 Incorrect key file for table 'table_name'; try to repair it"

    mysql中大数据表alter增加字段报错:"1034 Incorrect key file for table 'table_name'; try to repair it"

    现象描述: mysql中大数据表执行alter增加字段时,/tmp的目录爆满,并且报错"1034 Incorrect key file for table 'table_name'; try to repair it"。

    故障分析
    1、查询MySQL官网得知:

    *“ALTER TABLE运行时会对原表进行临时复制,在副本上进行更改,然后删除原表,再对新表进行重命名。在执行ALTER TABLE时,其它用户可以阅读原表,但是对表的更新和修改的操作将被延迟,直到新表生成为止。新表生成后,这些更新和修改信息会自动转移到新表上。

    2、通过分析可知在执行sql的时候,创建临时表进行排序的时候,/tmp的空间不足。

     当事务开始时,它将缓冲区语句分配一个binlog_cache_size大小的缓冲区(我这里设置的是32768bytes)。 如果一个语句大于此,线程将打开一个临时文件来存储事务(默认是存放在/tmp/目录下)。当线程结束时,临时文件会自动被删除。上面就是因为事务里面的临时文件超过缓存区大小时,被放到/tmp目录下了,但是这个临时文件实在太大了,导致磁盘空间不足告警了。
    MYSQL使用tmpdir情况: 
    1、执行计划file sort    文件名字MY开头
    lsof|grep delete
    如:/tmp/MYdRH1GW (deleted)
    
    2、大事物binary log缓存 文件名字ML开头
    lsof|grep delete
    如:/tmp/MLq9INFu (deleted)
    
    3、压缩的tempory table  
    CREATE TEMPORARY TABLE tmp_table1(id int) ROW_FORMAT=COMPRESSED ;
    ls /tmp/
    如:
    #sql6b82_6_7.frm
    #sql6b82_6_7.ibd
    
    4、online DDL 涉及排序比如add key
    alter table testsort add key(id);
    lsof|grep delete
    如:
    /tmp/ibCxlYQg (deleted)
    /tmp/ib51nvZ1 (deleted)
    设置 innodb_tmpdir可以将这类文件放到指定的目录

    故障处理

    1、无法扩展/tmp的大小,所以就修改mysql中tmpdir的位置,由于该参数是只读参数,只能在my.cnf中修改,重启生效
    enter description here

    2、创建临时目录,并且修改权限

    chmod 777 /data/tmp  #必须修改权限,让启动mysql的账户是可读写的. 此处是在root下创建,也可以切换到mysql用户下,然后创建目录,这样默认mysql就有读写权限了.

    3、修改my.cnf

    tmpdir = /data/tmp

    4、重启mysql实例

    5、查看tmpdir变量值
    enter description here
    备注:tmpdir变量已经修改生效了,后续执行SQL过程中生成的临时文件都会存储在这个目录下了.

    6、重新执行sql语句,执行成功

  • 相关阅读:
    Android——DEBUG 堆栈
    mycat读写分离与主从切换
    【測试工具】一个将Unix时间转换为通用时间的工具
    jQuery:多个AJAX/JSON请求相应单个回调
    iOS开发中经常使用的Xcode插件
    JAVA学习第二十六课(多线程(五))- 多线程间的通信问题
    我的mac OSX bash_profile文件
    angular学习(二)—— Data Binding
    python 读取grib grib2
    linux获取内存、cpu、负载、网口流量、磁盘信息
  • 原文地址:https://www.cnblogs.com/kcxg/p/10912766.html
Copyright © 2011-2022 走看看