zoukankan      html  css  js  c++  java
  • mysql+centos7+主从复制

    MYSQL(mariadb)

    MariaDB数据库管理系统是MySQL的一个分支,主要由开源社区在维护,采用GPL授权许可。
    开发这个分支的原因之一是:甲骨文公司收购了MySQL后,有将MySQL闭源的潜在风险,因此社区采用分支的方式来避开这个风险。
    MariaDB的目的是完全兼容MySQL,包括API和命令行,使之能轻松成为MySQL的代替品。
    

    yum安装mariadb

    第一种方式: 通过阿里云的yum源去下载(第三方的yum源,可能会版本较低, 且软件不全, 可能找不到)

    配置阿里云的yum源

    yum install mariadb-server mariadb-client

    mariadb-server                                 x86_64                        1:5.5.64-1.el7                          base                         11 M
    为依赖而安装:
     mariadb                                        x86_64                        1:5.5.64-1.el7                          base                        8.7 M
     perl-Compress-Raw-Bzip2                        x86_64                        2.061-3.el7                             base                         32 k
     perl-Compress-Raw-Zlib                         x86_64                        1:2.061-4.el7                           base                         57 k
     perl-DBD-MySQL                                 x86_64                        4.023-6.el7                             base                        140 k
     perl-DBI                                       x86_64                        1.627-4.el7                             base                        802 k
     perl-IO-Compress                               noarch                        2.061-2.el7                             base                        260 k
     perl-Net-Daemon                                noarch                        0.48-5.el7                              base                         51 k
     perl-PlRPC                                     noarch                        0.2020-14.el7                           base                         36 k
    为依赖而更新:
     mariadb-libs                                   x86_64                        1:5.5.64-1.el7                          base                        759 k
    

    第二种方式: 通过mariadb的官方yum源去下载(一定是这个软件最正确的yum源, 且包都是最新的 )

    yum install mariadb-server mariadb-client

    MariaDB-server                             x86_64                    10.1.41-1.el7.centos                             mariadb                     24 M
     MariaDB-shared                             x86_64                    10.1.41-1.el7.centos                             mariadb                    621 k
          替换  mariadb-libs.x86_64 1:5.5.60-1.el7_5
    为依赖而安装:
     MariaDB-client                             x86_64                    10.1.41-1.el7.centos                             mariadb                     10 M
     MariaDB-common                             x86_64                    10.1.41-1.el7.centos                             mariadb                     68 k
     boost-program-options                      x86_64                    1.53.0-27.el7                                    base                       156 k
     galera                                     x86_64                    25.3.26-1.rhel7.el7.centos                       mariadb                    8.1 M
     jemalloc                                   x86_64                    3.6.0-1.el7                                      epel                       105 k
     lsof                                       x86_64                    4.87-6.el7                                       base                       331 k
     perl-Compress-Raw-Bzip2                    x86_64                    2.061-3.el7                                      base                        32 k
     perl-Compress-Raw-Zlib                     x86_64                    1:2.061-4.el7                                    base                        57 k
     perl-DBI                                   x86_64                    1.627-4.el7                                      base                       802 k
     perl-Data-Dumper                           x86_64                    2.145-3.el7                                      base                        47 k
     perl-IO-Compress                           noarch                    2.061-2.el7                                      base                       260 k
     perl-Net-Daemon                            noarch                    0.48-5.el7                                       base                        51 k
     perl-PlRPC                                 noarch                    0.2020-14.el7                                    base                        36 k
     rsync                                      x86_64                    3.1.2-6.el7_6.1                                  base                       404 k
    

    >>> 这里用第二种方式安装

    第一步:添加 MariaDB yum 仓库

    1、首先在 RHEL/CentOS 和 Fedora 操作系统中添加 MariaDB 的 YUM 配置文件 MariaDB.repo 文件。
    
    #编辑创建mariadb.repo仓库文件
    vi /etc/yum.repos.d/MariaDB.repo
    
    2、添加repo仓库配置
    [mariadb]
    name = MariaDB
    baseurl = http://yum.mariadb.org/10.1/centos7-amd64
    gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB
    gpgcheck=1
    

    第二步:在 CentOS 7 中安装 MariaDB

    2、当 MariaDB 仓库地址添加好后,你可以通过下面的一行命令轻松安装 MariaDB。
    
    yum install MariaDB-server MariaDB-client -y
    

    第三步:启动mariadb

    systemctl start mariadb   
    

    启动mariadb相关命令

    systemctl start mariadb  //启动MariaDB
    systemctl stop mariadb  //停止MariaDB
    systemctl restart mariadb  //重启MariaDB
    systemctl enable mariadb  //设置开机启动
    

    配置mariadb

    第一步:初始化mysql

    在确认 MariaDB 数据库软件程序安装完毕并成功启动后请不要立即使用。为了确保数据 库的安全性和正常运转,需要先对数据库程序进行初始化操作。这个初始化操作涉及下面 5 个 步骤。
    ➢ 设置 root 管理员在数据库中的密码值(注意,该密码并非 root 管理员在系统中的密 码,这里的密码值默认应该为空,可直接按回车键)。
    ➢ 设置 root 管理员在数据库中的专有密码。
    ➢ 随后删除匿名账户,并使用 root 管理员从远程登录数据库,以确保数据库上运行的业
    务的安全性。
    ➢ 删除默认的测试数据库,取消测试数据库的一系列访问权限。
    ➢ 刷新授权列表,让初始化的设定立即生效。
    

    确保mariadb服务器启动后,执行命令初始化

    mysql_secure_installation
    

    初始化mysql

    mysql基本命令

    # 修改mysql本机登录密码, 远程登录密码由授权的时候进行设置
    MariaDB [(none)]> set password=PASSWORD('123');
    

    生产环境里不会死磕root用户,为了数据库的安全以及和其他用户协同管理数据库,就需要创建其他数据库账户,然后分配权限,满足工作需求

    MariaDB [(none)]> create user lyy@'127.0.0.1' identified by 'lyy123';
    MariaDB [(none)]> select host,user,password from mysql.user where user='lyy';
    +-----------+------+-------------------------------------------+
    | host      | user | password                                  |
    +-----------+------+-------------------------------------------+
    | 127.0.0.1 | lyy  | *8AF80463619D73FA535AAD754F8AF8250B5ED824 |
    +-----------+------+-------------------------------------------+
    

    切换普通用户lyy,查看数据库信息,发现无法看到完整的数据库列表

    $  mysql -ulyy -plyy123 -h 127.0.0.1
    MariaDB [(none)]> show databases;
    +--------------------+
    | Database           |
    +--------------------+
    | information_schema |
    +--------------------+
    
    一般来说没有这么麻烦, 直接在配置权限时候设置某个用户名, 该用户名会被自动创建

    第二步:配置mariadb远程登录

    mysql使用grant命令对账户进行授权,grant命令常见格式如下

    grant 权限 on 数据库.表名 to 账户@主机名  identified by '密码';           对特定数据库中的特定表授权
    grant 权限 on 数据库.* to 账户@主机名  identified by '密码';             对特定数据库中的所有表给与授权
    grant 权限1,权限2,权限3 on *.* to 账户@主机名 identified by '密码';      对所有库中的所有表给与多个授权
    grant all privileges on *.* to 账户@主机名 identified by '密码';      对所有库和所有表授权所有权限
    

    退出数据库,使用root登录,开始权限设置

    $  mysql -uroot -p123
    MariaDB [(none)]> use mysql;
    
    >>> 配置mariadb远程登录, 可以通过windows, pycharm等客户端进行连接, 在远端登录的话, 就必须输入123这个密码
    MariaDB [mysql]> grant all privileges on *.* to lxx@"%" identified by '123';
    MariaDB [mysql]> flush privileges;
    

    查看权限

    MariaDB [mysql]> select * from mysql.user where user='lxx'G;
    

    设置防火墙规则

    $  netstat -antlp |grep mysql
    tcp6       0      0 :::3306                 :::*                    LISTEN      8169/mysqld   
    $  ll /etc/firewalld/zones/
    总用量 8
    -rw-r--r--. 1 root root 315 10月  1 15:36 public.xml
    -rw-r--r--. 1 root root 315 10月  1 15:36 public.xml.old
    $  firewall-cmd --zone=public --permanent --add-port=3306/tcp
    success
    $  firewall-cmd --list-all
    public (active)
      target: default
      icmp-block-inversion: no
      interfaces: eth0
      sources: 
      services: ssh dhcpv6-client
      ports: 3306/tcp
      protocols: 
      masquerade: no
      forward-ports: 
      source-ports: 
      icmp-blocks: 
      rich rules: 
    

    远程登录数据库

    $  mysql -ulxx  -h '172.16.240.10'
    mysql> 
    

    第三步:配置mariadb中文编码

    编辑mysql配置文件/etc/my.cnf

    [mysqld]
    character-set-server=utf8
    collation-server=utf8_general_ci
    log-error=/var/log/mysqld.log
    [client]
    default-character-set=utf8
    [mysql]
    default-character-set=utf8
    

    查看编码

    show variables like '%char%';或者 s

    MariaDB [(none)]> show variables like '%char%';
    +--------------------------+----------------------------+
    | Variable_name            | Value                      |
    +--------------------------+----------------------------+
    | character_set_client     | utf8                       |
    | character_set_connection | utf8                       |
    | character_set_database   | utf8                       |
    | character_set_filesystem | binary                     |
    | character_set_results    | utf8                       |
    | character_set_server     | utf8                       |
    | character_set_system     | utf8                       |
    | character_sets_dir       | /usr/share/mysql/charsets/ |
    +--------------------------+----------------------------+
    
    MariaDB [(none)]> s
    --------------
    mysql  Ver 15.1 Distrib 10.1.41-MariaDB, for Linux (x86_64) using readline 5.1
    
    Connection id:		2
    Current database:	
    Current user:		root@localhost
    SSL:			Not in use
    Current pager:		stdout
    Using outfile:		''
    Using delimiter:	;
    Server:			MariaDB
    Server version:		10.1.41-MariaDB MariaDB Server
    Protocol version:	10
    Connection:		Localhost via UNIX socket
    Server characterset:	utf8
    Db     characterset:	utf8
    Client characterset:	utf8
    Conn.  characterset:	utf8
    UNIX socket:		/var/lib/mysql/mysql.sock
    Uptime:			2 min 50 sec
    
    Threads: 1  Questions: 5  Slow queries: 0  Opens: 17  Flush tables: 1  Open tables: 11  Queries per second avg: 0.029
    --------------
    

    验证是否配置成功

    MariaDB [(none)]> create database s16;
    
    >>> 查看数据库创建的编码
    MariaDB [(none)]> show create database s16;
    +----------+--------------------------------------------------------------+
    | Database | Create Database                                              |
    +----------+--------------------------------------------------------------+
    | s16      | CREATE DATABASE `s16` /*!40100 DEFAULT CHARACTER SET utf8 */ |
    +----------+--------------------------------------------------------------+
    
    >>> 切换到数据库s16
    MariaDB [(none)]> use s16;
    
    >>> 在数据库s16创建表test
    MariaDB [s16]> create table test ( id int primary key auto_increment, name varchar(128) );
    
    >>> 查看表test的表结构
    MariaDB [s16]> show create table testG;
    *************************** 1. row ***************************
           Table: test
    Create Table: CREATE TABLE `test` (
      `id` int(11) NOT NULL AUTO_INCREMENT,
      `name` varchar(128) DEFAULT NULL,
      PRIMARY KEY (`id`)
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8
    
    MariaDB [s16]> desc test;
    +-------+--------------+------+-----+---------+----------------+
    | Field | Type         | Null | Key | Default | Extra          |
    +-------+--------------+------+-----+---------+----------------+
    | id    | int(11)      | NO   | PRI | NULL    | auto_increment |
    | name  | varchar(128) | YES  |     | NULL    |                |
    +-------+--------------+------+-----+---------+----------------+
    
    >>> 在表test中插入中文字段
    MariaDB [s16]> insert into test (name) values ('水货身份证丢了');
    MariaDB [s16]> insert into test (name) values ('国庆快乐');
    MariaDB [s16]> select * from test;
    +----+-----------------------+
    | id | name                  |
    +----+-----------------------+
    |  1 | 水货身份证丢了        |
    |  2 | 国庆快乐              |
    +----+-----------------------+
    

    报错

    http://mirrors.aliyun.com/centos/%24releasever/os/x86_64/repodata/repomd.xml: [Errno 14] HTTP Error 404 - Not Found
    

    解决方案:

    打开 /etc/yum.repos.d/CentOS7-Base.repo, 将$releasever全改为7
    $  sed -i 's#$releasever#7#g' /etc/yum.repos.d/CentOS-Base.repo
    

    数据库备份与恢复

    mysqldump命令用于备份数据库数据

    >>>> 通过客户端备份
    $  mysqldump -ulxx -p -h '172.16.240.10' --all-databases > /tmp/db.dump
    Enter password: 
    $  du -shx /tmp/db.dump 
    516K	/tmp/db.dump
    

    删除某个数据库并还原

    mysql> drop database mysql;
    
    >>>> 还原数据
    >>>> 第一种方式, linux命令通过mysql命令
    $  mysql -uroot -p < /tmp/db.dump
    
    >>>> 第二种方式, 在mysql命令行中输入source命令
    MariaDB [(none)]> source /tmp/db.dump;
    

    骚操作

    删除了数据库mysql后, mariadb服务器重启服务无法重启

    $  systemctl restart mariadb
    Job for mariadb.service failed because the control process exited with error code. See "systemctl status mariadb.service" and "journalctl -xe" for details.
    

    删除/var/lib/mysql目录下所有文件, 再次重启mariadb恢复初始化

    这种方法只适用于5.5.64-MariaDB MariaDB Server, 通过阿里云第三方安装的yum源

    $  rm -rf /var/lib/mysql/*
    $  systemctl restart mariadb
    

    MYSQL主从复制

    MySQL数据库的主从复制方案,是其自带的功能,并且主从复制并不是复制磁盘上的数据库文件,而是通过binlog日志复制到需要同步的从服务器上。

    MySQL数据库支持单向、双向、链式级联,等不同业务场景的复制。在复制的过程中,一台服务器充当主服务器(Master),接收来自用户的内容更新(读写操作),而一个或多个其他的服务器充当从服务器(slave),接收来自Master上binlog文件的日志内容,解析出SQL,重新更新到Slave,使得主从服务器数据达到一致。

    主从复制的逻辑有以下几种:

    一主一从,单向主从同步模式,只能在Master端写入数据

    一主多从

    双主主复制逻辑架构,此架构可以在Master1或Master2进行数据写入,或者两端同时写入(特殊设置)

    在生产环境中,MySQL主从复制都是异步的复制方式,即不是严格的实时复制,但是给用户的体验都是实时的。
    MySQL主从复制集群功能使得MySQL数据库支持大规模高并发读写成为可能,且有效的保护了服务器宕机的数据备份
    

    应用场景

    利用复制功能当Master服务器出现问题时,我们可以人工的切换到从服务器继续提供服务,此时服务器的数据和宕机时的数据几乎完全一致。
    复制功能也可用作数据备份,但是如果人为的执行drop,delete等语句删除,那么从库的备份功能也就失效了.
    

    主从机制实现原理

    (1) master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,binary log events); 
    (2) slave将master的binary log events拷贝到它的中继日志(relay log); 
    (3) slave重做中继日志中的事件,将改变反映它自己的数据。
    

    mysql主从复制的步骤:

    第一步: master主库配置

    >>> 查看数据库状态
    systemctl status mariadb
    
    >>> 停mariadb
    systemctl stop mariadb
    
    >>> 修改配置文件
    vim /etc/my.cnf
    [mysqld]
    server-id=1
    log-bin=mysql-bin
    
    -------> 解释:server-id服务的唯一标识(主从之间都必须不同);log-bin启动二进制日志名称为mysql-bin 
    
    
    >>> 重启mariadb
    systemctl start mariadb
    
    >>> 检查主库的状态, 查看binlong文件
    MariaDB [(none)]> show master status;
    +------------------+----------+--------------+------------------+
    | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
    +------------------+----------+--------------+------------------+
    | mysql-bin.000001 |      313 |              |                  |
    +------------------+----------+--------------+------------------+
    

    第二步: master主库添加从库账号

    1.给从库账号授权,说明给chaoge从库复制的权限,在172.16.240.10机器上复制
    MariaDB [(none)]> grant replication slave on *.* to 'lyy'@'%' identified by '123';
    
    --------> 如果提示密码太简单不复合策略加在前面加这句
    MariaDB [(none)]> set global validate_password_policy=0;
    
    2.检查主库创建的复制账号
    MariaDB [(none)]> select user,host from mysql.user;
    
    3.检查授权账号的权限
    MariaDB [(none)]> show grants for lyy@'172.16.240.10';
    
    
    4. 实现对主数据库锁表只读,防止数据写入,数据复制失败
    MariaDB [(none)]> flush table with read lock;
    
    5.检查主库的状态
    MariaDB [(none)]> show master status;
    +------------------+----------+--------------+------------------+
    | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
    +------------------+----------+--------------+------------------+
    | mysql-bin.000001 |   483319 |              |                  |
    +------------------+----------+--------------+------------------+
    File是二进制日志文件名,Position 是日志开始的位置。后面从库会用到 后面从库会用到 后面从库会用到!!!!!!
    
    6.锁表后,一定要单独再打开一个SSH窗口,导出数据库的所有数据,
    $  mysqldump -uroot -p --all-databases > /data/all.sql 
    
    7.确保数据导出后,没有数据插入,完毕再查看主库状态
    show master status;
    
    8.导出数据完毕后,解锁主库,恢复可写;
    unlock tables;
    
    9.将备份导出的数据scp至Slave数据库
    scp /data/all.sql root@172.16.240.10:/data/
    

    第三步: slave从库配置

    1.设置server-id值并关闭binlog功能参数(配置文件里面不开启默认就是关闭的)
    数据库的server-id在主从复制体系内是唯一的,Slave的server-id要与主库和其他从库不同,并且log-bin参数是没有的
    MariaDB [(none)]> show variables like 'log_bin';
    +---------------+-------+
    | Variable_name | Value |
    +---------------+-------+
    | log_bin       | OFF   |
    +---------------+-------+
    
    2.因此修改Slave的/etc/my.cnf,写入
    $  vim /etc/my.cnf
    [mysqld]
    server-id=3
    
    3.重启数据库
    $  systemctl restart mariadb
    
    4.检查Slava从数据库的各项参数
    MariaDB [(none)]> show variables like 'log_bin';
    +---------------+-------+
    | Variable_name | Value |
    +---------------+-------+
    | log_bin       | OFF   |
    +---------------+-------+
    
    MariaDB [(none)]> show variables like 'server_id';
    +---------------+-------+
    | Variable_name | Value |
    +---------------+-------+
    | server_id     | 3     |
    +---------------+-------+
    
    5.恢复主库Master的数据导入到Slave库
    导入数据(注意sql文件的路径)
    MariaDB [(none)]> source /data/all.sql;
    
    
    6.配置复制的参数,Slave从库连接Master主库的配置
    MariaDB [(none)]> change master to master_host='172.16.240.10',
    master_user='yy',
    master_password='123',
    master_log_file='mysql-bin.000001',
    master_log_pos=482944;
    
    7.启动从库的同步开关,测试主从复制的情况
    MariaDB [(none)]> start slave;
    8.查看复制状态
    MariaDB [(none)]> show slave statusG;
                   Slave_IO_State: Waiting for master to send event
                      Master_Host: 172.16.240.10
                      Master_User: yy
                      Master_Port: 3306
                    Connect_Retry: 60
                  Master_Log_File: mysql-bin.000001
              Read_Master_Log_Pos: 483319
                   Relay_Log_File: slave-relay-bin.000002
                    Relay_Log_Pos: 912
            Relay_Master_Log_File: mysql-bin.000001
                 Slave_IO_Running: Yes
                Slave_SQL_Running: Yes
    

    检查主从复制是否成功

    在主库进行写操作, 观察从库是否是同步更新的
    
  • 相关阅读:
    docker 容器简单使用
    C++ | 程序编译连接原理
    C++ | 虚拟地址空间
    python学习笔记(十)——进程间通信
    菜鸟教程-c
    现代操作系统-第三版-疑问
    小米C++面经
    面经积累-杂
    哈希表相关题目-leetcode简单
    字符串相关题目-leetcode简单(6-10/共51道)
  • 原文地址:https://www.cnblogs.com/cjwnb/p/11617561.html
Copyright © 2011-2022 走看看