zoukankan      html  css  js  c++  java
  • 【原创】使用 Rotate Master 实现MySQL 多主复制

    背景:

    众所周知,MySQL只支持一对多的主从复制,而不支持多主(multi-master)复制。

    当然,5.6的GUID功能的出现也带来了multi-master的无限可能,不过这个已经是题外话了。

    本文主要介绍一种非实时的适用于各版本MySQL的multi-master方法。

    内容简介:

    最初的思路来源于一位国外DBA的blog : http://thenoyes.com/littlenoise/?p=117

    基本原理就是通过SP记录当前 master-log的name和pos记录到表中,然后读取下一个master记录,执行stop slave / change master / start slave。以此循环反复。

    个人对他的方法进行了改进,增加了以下功能:

    1. master可以根据业务流量设置权重值

    2. 各个master-slave运行情况的监控

    3. 各个master可以实时退出多主的架构

    具体操作过程:

    1. 创建保存各个master信息的表

    use mysql;
    CREATE
    TABLE `rotate_master` ( `id` int(11) NOT NULL AUTO_INCREMENT, `master_host` varchar(255) DEFAULT NULL comment 'master地址', `master_port` int(10) unsigned DEFAULT NULL comment 'master端口' , `master_log_file` varchar(255) DEFAULT NULL ‘上次停止时的master-log文件’, `master_log_pos` int(10) unsigned DEFAULT NULL comment '上次停止时的master-log-pos', `IS_Slave_Running` varchar(10) DEFAULT NULL comment '上次停止时主从是否有异常', `in_use` tinyint(1) DEFAULT '0' comment '是否是当前正在同步的数据行', `weight` int(11) NOT NULL DEFAULT '1' comment '该master的权重,即重复执行多少个时间片', `repeated_times` int(11) NOT NULL DEFAULT '0' comment '当前已经重复执行的时间片数', `LastExecuteTime` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP comment '上次执行的时间', PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8


    新增加一个master :

    insert  into `rotate_master`
    (`master_host`,`master_port`,`master_log_file`,`master_log_pos`,`in_use`,`weight`) 
    values 
    -- 1号master,权重=1,并设置为当前master
    ('192.168.0.1',3307,'mysqlbinlog.000542',4,1,1),
    -- 2号master,权重=2
    ('192.168.0.2',3306,'mysqlbinlog.000702',64762429,0,2),
    -- 3号master,权重=5
    ('192.168.0.3',3306,'mysqlbinlog.000646',22157422,0,5)

    手工把master 调整到当前的配置项:

    change master to master_host='192.168.0.1', master_port=3306,master_log_file='mysqlbinlog.000542',master_log_pos=4,master_user='repl',master_password='repl';
    start slave; 

    创建rotate master SP: 

    注意:代码中用于连接master的用户名和密码是 :  repl / repl ,请根据自己的情况修改。

    DELIMITER $$
    
    DROP PROCEDURE IF EXISTS `mysql`.`rotate_master`$$
    
    CREATE DEFINER=`root`@`localhost` PROCEDURE `rotate_master`()
    BEGIN
    DECLARE _info text;
    DECLARE _master_file varchar(255);
    DECLARE _master_pos int unsigned;
    DECLARE _master_host varchar(255);
    DECLARE _master_port int unsigned;
    DECLARE _is_slave_running varchar(10);
    DECLARE _id int;
    DECLARE _weight int;
    DECLARE _repeated_times int;
    
    select VARIABLE_VALUE from information_schema.GLOBAL_STATUS where VARIABLE_NAME = 'Slave_running' into _is_slave_running;
    STOP SLAVE;
    
    SELECT LOAD_FILE(@@relay_log_info_file) INTO _info;
    SELECT
    SUBSTRING_INDEX(SUBSTRING_INDEX(_info, '\n', 3), '\n', -1),
    SUBSTRING_INDEX(SUBSTRING_INDEX(_info, '\n', 4), '\n', -1)
    INTO _master_file, _master_pos;
    
    
    
    UPDATE mysql.rotate_master SET `master_log_file` = _master_file, `master_log_pos` = _master_pos, id = LAST_INSERT_ID(id), `IS_Slave_Running` =  _is_slave_running WHERE in_use = 1;
    
    select weight,repeated_times into _weight,_repeated_times from mysql.rotate_master where in_use =1;
    
    if(_weight <= _repeated_times)
    THEN
    SELECT
    id,
    master_host,
    master_port,
    master_log_file,
    master_log_pos
    INTO _id, _master_host, _master_port, _master_file, _master_pos
    FROM rotate_master
    ORDER BY id <= LAST_INSERT_ID(), id LIMIT 1;
    SET @sql := CONCAT(
    'CHANGE MASTER TO master_host=', QUOTE(_master_host),
    ', master_port=', _master_port,
    ', master_log_file=', QUOTE(_master_file),
    ', master_log_pos=', _master_pos
    ', master_user="repl"',
    ', master_password="repl"'
    );
    PREPARE myStmt FROM @sql; EXECUTE myStmt; UPDATE mysql.rotate_master SET in_use = 0,repeated_times=0 WHERE in_use = 1; UPDATE mysql.rotate_master SET in_use = 1,repeated_times=1 WHERE id = _id; ELSE UPDATE mysql.rotate_master SET `repeated_times`=`repeated_times`+1 WHERE in_use = 1; END IF; START SLAVE; END$$ DELIMITER ;

    创建Event:

    每2分钟运行一次,rotate_master() ,即时间片大小是2分钟

    DELIMITER $$
    
    CREATE EVENT `rotate_master` ON SCHEDULE EVERY 120 SECOND STARTS '2011-10-13 14:09:40' ON COMPLETION NOT PRESERVE ENABLE DO CALL mysql.rotate_master()$$
    
    DELIMITER ;

    至此,多主复制已经搭建完成。

    由于时间片长度是2分钟。

    Master1 在执行 1*2 分钟后,stop slave,然后change master to Master2;

    Master2 在执行 2*2 分钟后,stop slave,然后change master to Master3;

    Master3 在执行 5*2 分钟后,stop slave,然后change master to Master2;

    并以此循环往复。

    如果希望把其中一个master移除多主复制,可以将他的配置项权重设置为0;

    即: update rotate_master set weigh=0 where id = #ID# ; 

  • 相关阅读:
    Spring之调度器(Scheduler)
    Spring之拦截器(Interceptor)
    ThreadLocal相关
    hibernate操作数据库
    文件操作的工具类
    日期操作工具类
    有关mysql的utf8和utf8mb4,以及Illegal mix of collations for operation 'like'
    [原]nginx 一下快一下慢的问题
    再谈微信公众号网页授权的40163错误
    用DBCC CHECK修复SQL2000的数据库一致性问题
  • 原文地址:https://www.cnblogs.com/cenalulu/p/2490526.html
Copyright © 2011-2022 走看看