zoukankan      html  css  js  c++  java

  • mysql 利用binlog增量备份，还原实例

    mysql 利用binlog增量备份，还原实例

    张映 发表于 2010-09-29

    分类目录： mysql

    标签：, , ,

    一，什么是增量备份

    增量备份，就是将新增加的数据进行备份。假如你一个数据库，有10G的数据，每天会增加10M的数据，数据库每天都要备份一次，这么多数据是不是都要备份呢？还是只要备份增加的数据呢，很显然，我只要备份增加的数据。这样减少服务器的负担。


    二，启用binlog

    vi my.cnf

    log-bin=/var/lib/mysql/mysql-bin.log，如果是这样的话log-bin=mysql-bin.log默认在datadir目录下面

    [root@BlackGhost mysql]# ls |grep mysql-bin
    mysql-bin.000001
    mysql-bin.000002
    mysql-bin.000003
    mysql-bin.000004
    mysql-bin.000005
    mysql-bin.000006
    mysql-bin.index

    启动后会产生mysql-bin这样的文件，每启动一次，就会增加一个或者多个。

    mysql-bin.000002这样文件存放的是数据库每天增加的数据，所有数据库的数据增量都在这里面。

    三，查看mysql-bin.000002这样的文件里面到底是什么东西

    [root@BlackGhost mysql]# mysqlbinlog   /var/lib/mysql/mysql-bin.000002 > /tmp/add.sql

    查看复制打印?
    1. [root@BlackGhost mysql]# cat /tmp/add.sql   // 下面是根据mysql-bin生成的文件（部分内容）  
    2. /*!40019 SET @@session.max_insert_delayed_threads=0*/;  
    3. /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;  
    4. DELIMITER /*!*/;  
    5. # at 4  
    6. #100929 21:23:52 server id 1  end_log_pos 106     Start: binlog v 4, server v 5.1.50-log created 100929 21:23:52 at startup  
    7. # Warning: this binlog was not closed properly. Most probably mysqld crashed writing it.  
    8. ROLLBACK/*!*/;  
    9. BINLOG ' 
    10. 6D2jTA8BAAAAZgAAAGoAAAABAAQANS4xLjUwLWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA 
    11. AAAAAAAAAAAAAAAAAADoPaNMEzgNAAgAEgAEBAQEEgAAUwAEGggAAAAICAgC 
    12. '/*!*/;  
    13. # at 106  
    14. #100929 21:29:35 server id 1  end_log_pos 134     Intvar  
    15. SET INSERT_ID=16/*!*/;  
    16. # at 134  
    17. #100929 21:29:35 server id 1  end_log_pos 237     Query    thread_id=1    exec_time=0    error_code=0  
    18. use test/*!*/;           //这里是test数据库  
    19. SET TIMESTAMP=1285766975/*!*/;  
    20. SET @@session.pseudo_thread_id=1/*!*/;  
    21. SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=1, @@session.unique_checks=1/*!*/;  
    22. SET @@session.sql_mode=0/*!*/;  
    23. SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;  
    24. /*!C utf8 *//*!*/;  
    25. SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=33/*!*/;  
    26. SET @@session.lc_time_names=0/*!*/;  
    27. SET @@session.collation_database=DEFAULT/*!*/;  
    28. insert into aa(name)values('cccccccccc')  
    29. /*!*/;  
    30. # at 237  
    31. #100929 21:32:21 server id 1  end_log_pos 265     Intvar  
    32. SET INSERT_ID=12/*!*/;  
    33. # at 265  
    34. #100929 21:32:21 server id 1  end_log_pos 370     Query    thread_id=1    exec_time=0    error_code=0  
    35. SET TIMESTAMP=1285767141/*!*/;  
    36. insert into user(name)values('cccccccccc')  
    37. /*!*/;  
    38. # at 370  
    39. #100929 21:35:25 server id 1  end_log_pos 440     Query    thread_id=1    exec_time=0    error_code=0  
    40. SET TIMESTAMP=1285767325/*!*/;  
    41. BEGIN  
    42. /*!*/;  
    43. # at 440  
    44. #100929 21:35:25 server id 1  end_log_pos 468     Intvar  
    45. SET INSERT_ID=45/*!*/;  
    46. # at 468  
    47. #100929 21:35:25 server id 1  end_log_pos 573     Query    thread_id=1    exec_time=0    error_code=0  
    48. use blog/*!*/;             //这里是blog数据库  
    49. SET TIMESTAMP=1285767325/*!*/;  
    50. insert into city(CityName)values('asdf')  
    51. /*!*/;  
    52. # at 573  
    53. #100929 21:35:25 server id 1  end_log_pos 600     Xid = 205  
    54. COMMIT/*!*/;  
    55. DELIMITER ;  
    56. # End of log file  
    57. ROLLBACK /* added by mysqlbinlog */;  
    58. /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;  

    下面还有一个重要索引文件就是mysql-bin.index

    1. [root@BlackGhost mysql]# cat mysql-bin.index  
    2. ./mysql-bin.000001  
    3. ./mysql-bin.000002  
    4. ./mysql-bin.000003  
    5. ./mysql-bin.000004  
    6. ./mysql-bin.000005  
    7. ./mysql-bin.000006  

    四，增量备份和增量还原

    1，增量备份

    既然我们知道了，mysql里面新增加的数据在mysql-bin这样的文件里面，我们只要把mysql-bin这样的文件进行备份就可以了。

    cp /var/lib/mysql/mysql-bin* /data/mysql_newbak/

    2，增量还原，讲几个常用的，比较有用的

    a），根据时间来还原 --start-date,--stop-date

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog --start-date="2010-09-29 18:00:00" --stop-date="2010-09-29 23:00:00" /var/lib/mysql/mysql-bin.000002 |mysql -u root -p

    根据条件看一下数据

    查看复制打印?
    1. [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog  --start-date="2010-09-29 18:00:00"  
    2. --stop-date="2010-09-29 23:00:00"  /var/lib/mysql/mysql-bin.000002  
    3. //下面是部分内容，其实也就是一些对数据进行操作的sql语句  
    4. # at 237  
    5. #100929 21:32:21 server id 1  end_log_pos 265     Intvar  
    6. SET INSERT_ID=12/*!*/;  
    7. # at 265  
    8. #100929 21:32:21 server id 1  end_log_pos 370     Query    thread_id=1    exec_time=0    error_code=0  
    9. SET TIMESTAMP=1285767141/*!*/;  
    10. insert into user(name)values('cccccccccc')  
    11. /*!*/;  
    12. # at 370  
    13. #100929 21:35:25 server id 1  end_log_pos 440     Query    thread_id=1    exec_time=0    error_code=0  
    14. SET TIMESTAMP=1285767325/*!*/;  
    15. BEGIN  
    16. /*!*/;  
    17. # at 440  
    18. #100929 21:35:25 server id 1  end_log_pos 468     Intvar  
    19. SET INSERT_ID=45/*!*/;  
    20. # at 468  
    21. #100929 21:35:25 server id 1  end_log_pos 573     Query    thread_id=1    exec_time=0    error_code=0  

    b），根据起始位置来还原，--start-position,--stop-position

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog --start-position=370 --stop-position=440  /var/lib/mysql/mysql-bin.000002 |mysql -u root -p

    //查看插入的内容，根a）中是一样的

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog --start-position=370 --stop-position=440  /var/lib/mysql/mysql-bin.000002

    --start-position=370 --stop-position=440 这里面数字从哪儿来的呢？
    # at 370
    #100929 21:35:25 server id 1  end_log_pos 440 Query    thread_id=1    exec_time=0    error_code=0
    SET TIMESTAMP=1285767325/*!*/;

    上面的红色加粗的就是，一个是start-position，一个是stop-position

    c），根据数据库名来进行还原 -d

    在这里是小写的d，请不要把它和mysqldump中的－D搞混了。哈哈。

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog -d test  /var/lib/mysql/mysql-bin.000002

    查看内容，请参考a）

    d），根据数据库所在IP来分－h

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog -h 192.1681.102  /var/lib/mysql/mysql-bin.000002

    查看内容，请参考a）

    e），根据数据库所占用的端口来分－P

    有的时候，我们的mysql用的不一定是3306端口，注意是大写的P

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog -p 13306  /var/lib/mysql/mysql-bin.000002

    查看内容，请参考a）

    f），根据数据库serverid来还原--server-id

    在数据库的配置文件中，都有一个serverid并且同一集群中serverid是不能相同的。

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog --server-id=1  /var/lib/mysql/mysql-bin.000002

    查看内容，请参考a）

    注意：上面的几个例子，我都是一个一个说的，其实可以排列组合的。例如

    [root@BlackGhost mysql]# /usr/local/mysql/bin/mysqlbinlog --start-position="2010-09-29 18:00:00" -d test -h 127.0.0.1 /var/lib/mysql/mysql-bin.000002 ｜mysql -u root -p

    五，后续

    增量备份的时候，有一点让人不爽，就是mysql-bin这样的文件，每启动一次mysql就会增加一些，如果你不去管他的话，时间长了，他会把你的磁盘占满。

    ./mysqldump --flush-logs -u root  myblog > /tmp/myblog.sql

    备份myblog数据库，清除增量备份里面的有关myblog的数据

    ./mysqldump --flush-logs -u root  --all-databases > /tmp/alldatabase.sql

    备份所有数据库，清除增量备份

    mysql-bin.index的起索引作用，因为增量的数据不一定在一个mysql-bin000这样的文件里面，这个时候，我们就要根据mysql-bin.index来找mysql-bin这样的增量文件了。

    如果mysql里面做了这样的配置binlog-do-db=test1，增量备份里面只会有test1这个数据库的数据

     

    http://blog.51yip.com/mysql/1042.html
  • 相关阅读:
    JS 循环遍历json
    客户端获取ip
    jquery 常用获取值得方法汇总
    C# MATLAB混合编程
    java设计模式之抽象工厂模式学习
    java设计模式之工厂模式学习
    java设计模式之装饰者模式学习
    本周任务
    模仿jquery的data
    js中random的应用
  • 原文地址：https://www.cnblogs.com/seasonzone/p/5524784.html
Copyright © 2011-2022 走看看