zoukankan      html  css  js  c++  java
  • 搭建MySQL主从复制及原理详解

    搭建MySQL主从复制及原理详解

    ​ MySQL的复制有3中常见架构,分别是一主多从复制架构、多级复制架构和双主复制架构。本片文章主要讲解的是一主多从架构及其搭建过程,其它两种有兴趣的读者可以留言。

    1.复制简述

    ​ MySQL从3.23版本开始提供复制的功能。复制是指将主数据库的DDL和DML操作通过二进制日志传到复制服务器(也叫从库)上,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。
    ​ MySQL支持一台主库同时向多台从库进行复制,从库同时也可以作为其他服务器的主库,实现链状的复制。
    ​ MySQL复制的优点主要包括以下3个方面:

    1. 如果主库出现问题,可以快速切换到从库提供服务;
    2. 可以在从库上执行查询操作,降低主库的访问压力;
    3. 可以在从库上执行备份,以避免备份期间影响主库的服务。

    2.复制原理

    ​ (1)首先,MySQL主库在事务提交时会把数据变更作为事件Events记录在二进制日志文件Binlog中;MySQL主库上的sync_binlog参数控制Binlog日志刷新到磁盘。
    ​ (2)主库推送二进制日志文件Binlog中的事件到从库的中继日志Relay Log,之后从库根据中继日志Relay Log重做数据变更操作,通过逻辑复制以此来达到主库和从库的数据一致。
    ​ MySQL通过 3个线程来完成主从库间的数据复制:其中Binlog Dump线程跑在主库上, I/O线程和SQL线程跑在从库上。当在从库上启动复制(START SLAVE)时,首先创建 I/O线程连接主库,主库随后创建Binlog Dump线程读取数据库事件并发送给 I/O线程,I/O线程获取到事件数据后更新到从库的中继日志Relay Log中去,之后从库上的SQL线程读取中继日志Relay Log中更新的数据库事件并应用,如下图所示:

    <img src="C:Users50312AppDataRoamingTypora ypora-user-imagesimage-20201207083143526.png" alt="image-202

    01207083143526" style="zoom:80%;" />

    3.复制涉及的各类文件

    二进制日志(Binlog)

    ​ 二进制日志文件(Binlog)会把 MySQL 中的所有数据修改操作以二进制的形式记录到日志文件中,包括Create、Drop、Insert、Update、Delete操作等,但二进制日志文件(Binlog)不会记录Select操作,因为Select操作并不修改数据。
    ​ 二进制日志文件Binlog格式有以下3种:

    • Statement:基于SQL语句级别的Binlog,每条修改数据的SQL都会保存到Binlog里
    • Row:基于行级别,记录每一行数据的变化,也就是将每行数据的变化都记录到Binlog里面,记录得非常详细,但是并不记录原始SQL;在复制的时候,并不会因为存储过程或触发器造成主从库数据不一致的问题,但是记录的日志量较Statement格式要大得多。
    • Mixed:混合Statement和Row模式,默认情况下采用Statement模式记录,某些情况下会切换到Row模式,例如SQL中包含与时间、用户相关的函数等。

    中继日志(Relay Log)

    ​ 中继日志文件Relay Log的文件格式、内容和二进制日志文件Binlog一样,唯一的区别在于从库上的SQL线程在执行完当前中继日志文件Relay Log中的事件之后,SQL线程会自动删除当前中继日志文件Relay Log,避免从库上的中继日志文件Relay Log占用过多的磁盘空间。

    4.搭建步骤

    关闭主从机器的防火墙

    # systemctl stop iptables(需要安装iptables服务)
    # systemctl stop firewalld(默认)
    # systemctl disable firewalld.service(设置开启不启动)
    

    主服务器配置

    第一步:修改my.cnf文件

    ​ 修改主数据库服务器的配置文件my.cnf,开启BINLOG,并设置server-id的值。这两个参数的修改需要重新启动数据库服务才可以生效。

    [mysqld]
    #启用二进制日志
    log-bin=mysql-bin
    #服务器唯一ID,一般取IP最后一段
    server-id=136
    

    第二步:重启MySQL

    # systemctl restart mysqld
    

    第三步:授予Slave从机权限

    mysql> GRANT REPLICATION SLAVE ON *.* TO 'root'@'192.168.211.138'IDENTIFIED BY '123456';
    

    第四步:刷新权限

    FLUSH PRIVILEGES;
    

    第五步:查看master的状态

    mysql> show master status;
    +------------------+----------+--------------+------------------+-------------------+
    | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
    +------------------+----------+--------------+------------------+-------------------+
    | mysql-bin.000006 |      120 |              |                  |                   |
    +------------------+----------+--------------+------------------+-------------------+
    

    上图表示,主机将从 mysql-bin.000006这个二进制文件的120行这个位置开始同步。

    从服务器配置

    第一步:修改my.cnf文件

    [mysqld]
    server-id=138
    

    确保集群中的各个服务器的server-id唯一。

    第二步:重启并登录到从库

    先使用如下命令查看从机是否在运行,是的话先停止运行

    mysql> show slave status G;
    mysql> stop slave;
    

    第三步:配置从数据库服务器

    ​ 指定复制用户,主数据库服务器IP、端口以及开始执行复制的日志文件和位置等,具体如下:

    mysql> change master to
    -> master_host='master_host_name',
    -> master_port='master_host_port',
    -> master_user='replication_user_name',
    -> master_password='replication_password',
    -> master_log_file='recorded_log_file_name',
    -> master_log_pos=recorded_log_position;
    

    举例说明如下:

    mysql> change master to
        -> master_host='192.168.211.136',
        -> master_port=3306,
        -> master_user='root',
        -> master_password='123456',
        -> master_log_file='mysql-bin.000006',
        -> master_log_pos=120;
    

    第四步:启动slave线程

    mysql> start slave;
    Query OK, 0 rows affected (0.01 sec)
    

    第五步:检查从服务器复制功能状态

    mysql> show slave status G;
    *************************** 1. row ***************************
                   Slave_IO_State: Waiting for master to send event
                      Master_Host: 192.168.211.136
                      Master_User: root
                      Master_Port: 3306
                    Connect_Retry: 60
                  Master_Log_File: mysql-bin.000006
              Read_Master_Log_Pos: 120
                   Relay_Log_File: mysqld-relay-bin.000002
                    Relay_Log_Pos: 283
            Relay_Master_Log_File: mysql-bin.000006
                 Slave_IO_Running: Yes
                Slave_SQL_Running: Yes
    。。。。。。。省略
    

    Slave_IO_Running: Yes 说明从库IO线程已就绪。
    Slave_SQL_Running: Yes 说明从库SQL线程已就绪。

    测试

    ​ 搭建成功之后,往主机中插入数据,看看从机中是否有数据

    注: 如果出现复制不成功,可以使用
    mysql> set global sql_slave_skip_counter =1; # 忽略一个错误
    mysql> start slave
    

    5.存在问题:主从延时

    查看主机处理状态

    ​ 可以通过SHOW PROCESSLIST命令在主库上查看Binlog Dump线程,从BinlogDump线程的状态可以看到,MySQL 的复制是主库主动推送日志到从库去的,是属于“推”日志的方式来做同步

    mysql> mysql> show processlist g;
    +----+------+-----------------------+------+-------------+-------+-----------------------------------------------------------------------+------------------+
    | Id | User | Host                  | db   | Command     | Time  | State                                                                 | Info             |
    +----+------+-----------------------+------+-------------+-------+-----------------------------------------------------------------------+------------------+
    |  3 | root | 192.168.211.1:50147   | NULL | Sleep       | 11225 |                                                                       | NULL             |
    |  6 | root | 192.168.211.138:52846 | NULL | Binlog Dump |  6174 | Master has sent all binlog to slave; waiting for binlog to be updated | NULL             |
    |  7 | root | localhost             | NULL | Query       |     0 | init                                                                  | show processlist |
    +----+------+-----------------------+------+-------------+-------+-----------------------------------------------------------------------+------------------+
    3 rows in set (0.00 sec)
    

    查看从机处理状态

    ​ 在从库上通过SHOW PROCESSLIST可以看到 I/O线程和SQL线程,I/O线程等待主库上的Binlog Dump线程发送事件并更新到中继日志Relay Log,SQL线程读取中继日志Relay Log并应用变更到数据库:

    mysql> show processlist g;
    +----+-------------+---------------------+------+---------+------+-----------------------------------------------------------------------------+------------------+
    | Id | User        | Host                | db   | Command | Time | State                                                                       | Info             |
    +----+-------------+---------------------+------+---------+------+-----------------------------------------------------------------------------+------------------+
    |  4 | root        | 192.168.211.1:50207 | NULL | Sleep   |  572 |                                                                             | NULL             |
    |  6 | system user |                     | NULL | Connect | 6343 | Waiting for master to send event                                            | NULL             |
    |  7 | system user |                     | NULL | Connect | 5859 | Slave has read all relay log; waiting for the slave I/O thread to update it | NULL             |
    |  9 | root        | localhost           | NULL | Query   |    0 | init                                                                        | show processlist |
    +----+-------------+---------------------+------+---------+------+-----------------------------------------------------------------------------+------------------+
    4 rows in set (0.00 sec)
    
  • 相关阅读:
    Linux下Nginx配置文件nginx.conf默认位置修改
    centos下安装Nginx
    让网站永久拥有免费HTTPS(SSL)
    Perl深度优先迷宫算法
    Perl字符贪吃蛇
    Linux静态路由配置
    Linux虚拟机网络配置
    Perl快速查找素数
    Shell同步数据到oracle数据库
    Shell修改密码为原密码
  • 原文地址:https://www.cnblogs.com/process-h/p/14096511.html
Copyright © 2011-2022 走看看