Mha-Atlas-MySQL高可用
一、MHA简介
1、软件介绍
MHA在MySQL高可用是一个相对成熟的解决方案，是一套优秀的作为mysql高可用
环境下故障切换和主从提升的高可用软件，在MySQL故障切换过程中，
MHA能做到0~30秒内自动完成数据库的故障切换操作，并且在进行故障
切换过程中，MHA能最大程度上保证数据库的一致性，以达到真正意义上的高可用。
2、MHA组成
MHA由两部分组成：MHA Manager（管理节点）和MHA Node（数据节点）。
MHA Manager可以独立部署在一台独立的机器上管理多个Master-Slave集群，
也可以部署在一台Slave上。当Master出现故障时，它可以自动将最新数据的
Slave提升为新的Master，然后将所有其他的Slave重新指向新的Master。
3、MHA工作流程
①从宕机崩溃的master保存二进制日志时间（binlog events）；
②识别含有最近更新的slave；
③应用差异的中继日志（relay log）到其他的slave；
④应用从master保存的二进制日志事件（binlog events）；
⑤提升一个slave为新的master；
⑥使其它的slave连接新的master进行复制；
流程详解
1）复制主库binlog日志出来
2）找出relaylog日志最全的从库
3）将最全的relaylog日志在所有从库中同步（第一次同步数据）
4）将之前最全的从库提升为主库
5）将复制出来的binlog日志，放到新提升的主库里
6）其他所有从库重新指向新提升的主库，继续主从复制
4、MHA工具介绍
MHA软件由两部分组成：Manager工具包（管理端）和Node工具包（节点端）
（1）Manager主要包括以下几个工具：
masterha_check_ssh ==>检查MHA的SSH配置状况
masterha_check_repl ==>检查MySQL复制状况
masterha_check_status ==>检测当前MHA运行状态
masterha_master_monitor ==>检测master是否宕机
masterha_manger ==>启动MHA
masterha_master_switch ==>控制故障转移（自动或手动）
masterha_conf_host ==>添加或删除配置的server信息
masterha_secondary_check ==>试图建立TCP连接从远程服务器
masterha_stop ==>停止MHA
（2）Node主要包括以下几个工具：
save_binary_logs ==>保存和复制master的二进制日志
apply_diff_relay_logs ==>识别差异的中继日志事件
filter_mysqlbinlog ==>去除不必要的ROLLBACK事件
purge_relay_logs ==>清除中继日志
二、MHA环境准备
1、准备三台mysql虚拟机
| 主机名 | IP地址（NAT） | 描述 |
|---|---|---|
| mysql-db01 | eth0:192.168.200.51 | 系统：CentOS6.5 安装：mysql5.6 |
| mysql-db02 | eth0:192.168.200.52 | 系统：CentOS6.5 安装：mysql5.6 |
| mysql-db03 | eth0:192.168.200.53 | 系统：CentOS6.5 安装：mysql5.6 |
2、软件包
mha管理节点安装包
mha4mysql-manager-0.56-0.el6.noarch.rpm
mha4mysql-manager-0.56.tar.gz
mha node节点安装包
mha4mysql-nade-0.56-0.el6.noarch.rpm
mha4mysql-node-0.56.tar.gz
mysql中间件
Atlas-2.2.1.el6.x86_64.rpm
mysql源码安装包
mysql-5.6.17-linux-glibc2.5-x86_64tar
3、主机名映射
三台虚拟机，都需要映射三个IP域名
三、MySQL环境准备
三台虚拟机都需要安装MySQL
安装mysql二进制
直接解压即可：解压到/usr/local/
创建用户：
useradd -s /sbin/nologin -M mysql
进入/usr/local/mysql-5.5.32-linux/
做个软连接方便使用==>
ln -s mysql-5.5.32-linux /usr/local/mysql
复制配置文件：
/bin/cp support-files/my-small.cnf /etc/my.cnf
做初始化：
创建mysql数据文件目录==>
mkdir -p /usr/local/mysql/data
授权mysql用户管理mysql的安装目录==>
chown -R mysql.mysql /usr/local/mysql
安装初始化mysql依赖包==>
yum -y install libaio
初始化mysql数据库文件==>
/usr/local/mysql/scripts/mysql_install_db --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data --user=mysql
复制mysql启动脚本到mysql的命令路径==>
cd /usr/local/mysql cp support-files/mysql.server /etc/init.d/mysqld
加x权限，使脚本可执行==>
chmod +x /etc/init.d/mysqld
启动mysql==>
/etc/init.d/mysqld start
给mysql命令做软连接==>
ln -s /usr/local/mysql/bin/* /usr/local/bin
给mysql添加密码==>
mysqladmin -uroot password '123123'
四、配置GTID主从复制
1、GTID主从复制
自动追踪
2、GTID全局事物标识符
是一个唯一的标识符，他创建并与源服务器（主）上提交的每个事物相关联。
GTID实际上是由UUID+TID组成的。其中UUID是一个MySQL实例的唯一标识。
3、GTID的新特性
支持多线程复制，每个库有一个单独的（sql线程）
支持启用GTID，无需再知道binlog和POS点，只需知道master的IP/端口/账号密码即可
基于Row复制只保存改变的列，大大节省磁盘空间，网络，内存等
支持把master和slave的相关信息记录在table中，增强可用性。原来是记录在文件里。
支持延迟复制。
4、先决条件
- 主库和从库都要开启binlog
- 主库和从库server-id不同
- 要有主从复制用户
5、主库配置
#修改主库配置文件/etc/my.cnf [root@mysql-db01 mysql]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #开启binlog日志 server_id = 1 #设置server_id innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K #重启动MySQL服务 [root@mysql-db01 mysql]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
登录MySQL创建主从复制账号
mysql> grant replication slave on *.* to rep@'192.168.0.%' identified by '123123'; Query OK, 0 rows affected (0.00 sec) mysql> select user,host from mysql.user; +------+-------------+ | user | host | +------+-------------+ | rep | 192.168.0.% | | root | localhost | | root | mysql-db01 | +------+-------------+ 3 rows in set (0.00 sec) mysql> show grants for rep@'192.168.0.%'; +--------------------------------------------------------------------------------------------------------------------------+ | Grants for rep@192.168.0.% | +--------------------------------------------------------------------------------------------------------------------------+ | GRANT REPLICATION SLAVE ON *.* TO 'rep'@'192.168.0.%' IDENTIFIED BY PASSWORD '*E56A114692FE0DE073F9A1DD68A00EEB9703F3F1' | +--------------------------------------------------------------------------------------------------------------------------+ 1 row in set (0.00 sec)
6、从库配置
#修改mysql-db02配置文件(和mysql-db01配置文件一致) #只需要修改server-id = 5选项 [root@mysql-db02 ~]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #从binlog也要打开 server_id = 5 #仅需修改此项 innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K [root@mysql-db02 ~]# /etc/init.d/mysqld restart #重启mysql Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! #修改mysql-db03配置文件(和mysql-db01配置文件一致) #只需要修改server-id = 10选项 [root@mysql-db03 ~]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #从binlog也要打开 server_id = 10 #只需修改此项 innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K [root@mysql-db03 ~]# /etc/init.d/mysqld restart #重启mysql Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
特别提示：
在以往如果是基于binlog日志的主从复制，则必须要记住主库的master状态信息。
7、开启GTID
查看gtid开没开—>在mysql里输入：
show global variables like '%gtid%'
开启gtid需要在mysql配置文件里[mysqld]模块添加三行代码（三台服务器都需要添加）
gtid_mode = ON log_slave_updates enforce_gtid_consistency
修改完配置文件以后重启动数据库
[root@mysql-db01 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db02 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db03 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
再次查看GTID状态
mysql> show global variables like '%gtid%'; +--------------------------+-------+ | Variable_name | Value | +--------------------------+-------+ | enforce_gtid_consistency | ON | #执行GTID一致 | gtid_executed | | | gtid_mode | ON | #开启GTID模块 | gtid_owned | | | gtid_purged | | +--------------------------+-------+ 5 rows in set (0.00 sec)
8、配置主从复制(mysql-db02,mysql-db03)
mysql> change master to
-> master_host='192.168.0.51', #主库IP
-> master_user='rep', #主库复制用户
-> master_password='123123', #主库复制用密码
-> master_auto_position=1; #GTID位置点（自动追踪需要同步的position）
Query OK, 0 rows affected, 2 warnings (0.00 sec)
9、开启从库的主从复制功能（mysql-db02,mysql-db03）
mysql> start slave; #开启主从同步功能 Query OK, 0 rows affected, 1 warning (0.01 sec)
登录mysql输入show slave statusG
查看状态是否IO线程和SQL线程为yes
10、禁止数据库自动删除中继（relaylog）日志，mysql-db02,mysql-db03都需要添加
编辑配置文件/etc/my.cnf
在[mysql]模板下增加relay_log_purge =0永久禁用自动删除relaylog功能
重启mysql==>/etc/init.d/mysqld restart
重启MySQL服务
[root@mysql-db02 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db03 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
五、部署MHA
1、所有节点mysql-db01,mysql-db02,mysql-db03
安装依赖包
yum -y install perl-DBD-MySQL
rpm安装node节点包
rpm -ivh mha4mysql-node-0.56-0.e16.noarch.rpm
MHA需要一个管理账号，登录mysql输入如下代码
grant all privileges on *.* to mha@'192.168.200.%' identified by '123123'
2、部署管理节点（mha-manager）
manager管理端的包不能安装在主库上，安装一个管理端
安装manager依赖包（需要公网源）
wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo wget -O /etc/yum.repos.d/epel-6.repo http://mirrors.aliyun.com/repo/epel-6.repo yum -y install perl-Config-Tiny epel-release perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
createrepo -v . ==>安装当前文件内所有rpm包
安装manager包
rpm -ivh mha4mysql-manager-0.56-0.el6.noarch.rpm
创建配置文件目录
mkdir -p /etc/mha
创建日志目录
mkdir -p /var/log/mha/mha1
进入cd /etc/mha创建第一个mha配置文件==>vim /etc/mha/mha1.cnf
[server default] manager_log=/var/log/mha/mha1/manager ==>manager管理日志存放路径 manager_workdir=/var/log/mha/mha1 ==>manager管理日志的目录路径 master_binlog_dir=/usr/local/mysql/data ==>binlog日志的存放路径 user=mha ==>管理账户 password=123123 ==>管理账户密码 ping_interval=2 ==>存活检查的间隔时间 repl_user=rep ==>主从复制的授权账户 repl_password=123123 ==>主从复制的授权账户密码 ssh_user=root ==>用于ssh连接的账户 [server1] ==>第一台服务器信息 hostname=192.168.200.51 port=3306 [server2] ==>第二台服务器信息 #candidate_master=1 ==>强制将此master提升为主库 #check_repl_delay=0 ==>暂时注释自己试验什么意思 hostname=192.168.200.52 port=3306 [server3] ==>第三台服务器信息 hostname=192.168.200.53 port=3306
特别说明：
参数：candidate_master=1
解释：设置为候选master，如果设置该参数以后，发生主从切换以后会将此从库提升为主库，即使这个主库不是集群中事件最新的slave
参数：check_repl_delay=0
解释：默认情况下如果一个slave落后master 100M的relay logs 的话，MHA将不会选择该slave作为一个新的master，因为对于这个slave的恢复需要花费很长时间，通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时，这个参数对于设置了candidate_master=1的主机非常有用，因为这个候选主在切换的过程中一定是新的master
3、配置ssh信任开始分发免秘钥（所有节点mysql-db01,mysql-db02,mysql-db03）
每台服务器都要创建秘钥对
ssh-keygen -t -P "" -f ~/.ssh/id_dsa
发送mysql-db03公钥，包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
发送mysql-db02公钥，包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
发送mysql-db01公钥，包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
4、启动检测
ssh检查命令
masterha_check_ssh --conf=/etc/mha/mha1.cnf
Tue Sep 5 03:01:40 2017 - [debug] Connecting via SSH from root@192.168.0.53(192.168.0.53:22) to root@192.168.0.52(192.168.0.52:22).. Tue Sep 5 03:01:40 2017 - [debug] ok. Tue Sep 5 03:01:40 2017 - [info] All SSH connection tests passed successfully. #出现这个就表示成功
主从复制检测
masterha_check_repl --conf=/etc/mha/mha1.cnf
因此在mysql-db02和mysql-db03上添加主从复制的用户即可。
grant replication slave on *.* to rep@'192.168.200.%' identified by '123123';
再次检查
5、启动MHA
nohup masterha_manager --conf=/etc/mha/mha1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/mha1/manager.log 2>&1 &
ps -ef | grep perl
nohup 启动命令
--conf 指定配置文件位置
--remove_dead_master_conf 如果有master down了，就去掉配置文件里该master的部分