通常数据库备份数据文件、binlog 日志文件和 my.cnf 配置文件都应在其他地方保存一份甚至多份
仅备份是没有任何意义, 需要在测试环境中做日常恢复演练, 测试备份的可用性, 恢复较比备份更加的重要
备份: 能够有效防止设备故障以及人为误操作带来的数据丢失, 例如:将数据文件保存在远端。
冗余: 数据有多分冗余, 但不等于备份, 只能防止机械故障丢失的数据, 例如: 主备模式、数据库集群。
- 数据库备份必须考虑因素
- 数据的一致性
- 服务的可用性
- 数据库备份方式
- 逻辑备份: 备份 DDL DML DCL 语句, 适用于中小型数据库, 效率相对低下。
mysqldump、mydumper - 物理备份: 直接复制数据库文件, 适用于大型数据库环境, 效率相对较高。
xtrabackup、inbackup、cp、tar、lvm snapshot
- 逻辑备份: 备份 DDL DML DCL 语句, 适用于中小型数据库, 效率相对低下。
- 数据库备份模式
- 完全备份
- 增量备份
- 差异备份
Mysql逻辑备份与恢复
Mysql自带逻辑备份工具 mysqldump , 可以保证数据备份一致性, 以及服务可用性
不管物理备份还是逻辑备份, 必须开启 binlog 日志
- mysqldump -h 服务器 -u 用户名 -p 密码 数据库名 > 备份文件.sql
- -A, --all-databases # 备份所有库
- -B, --databases # 备份多个库多个数据库
- --single-transaction # InnoDB 一致性 服务可用性
- --master-data=1|2 # 记录 binlog 日志位置与文件名 , 追加至备份文件中
- --triggers # 备份触发器
- -F, --flush-logs # 备份之前刷新日志
- -E, --events # 备份事件调度器代码
- -R, --routines # 备份存储过程和存储函数
完整备份与恢复
## 创建备份目录
[root@Mysql ~]# mkdir /backup/mysql -p
## 完整备份
[root@Mysql ~]# mysqldump -uroot -p'Sgy123.com' --all-databases --single-transaction --master-data=1 --flush-logs > /backup/mysql/`date +%F%H`-mysql-all.sql
## 查看备份结果
[root@Mysql ~]# ls /backup/mysql/
2019-04-0400-mysql-all.sql- 数据库完整恢复流程
- 停止数据库
- 删除破损数据库
- 重新初始化数据库
- 重置密码,否则无法恢复
- 恢复数据[新密码]
- 刷新授权[备份时密码]
模拟数据数据丢失
本人YUM安装的Mysql，我这直接卸载了，删除所有 Mysql 数据，再重新安装
其他安装方式（源码、二进制）可以在my.cnf里面datadir指定的目录内容全删，在初始化数据库
[root@Mysql ~]# systemctl stop mysqld
[root@Mysql ~]# rpm -e mysql-community-server
[root@Mysql ~]# rm -rf /var/lib/mysql/*
[root@Mysql ~]# yum install mysql-community-server -y
## 开启 binlog 日志
[root@Mysql ~]# vim /etc/my.cnf
[mysqld]
.......
server-id = 1
binlog_format = mixed
log-bin = /log/mysql_bin/mysql-bin ##有这个目录并且属主和属组都为 mysql
expire_logs_days = 30重新初始化数据库后
[root@Mysql ~]# systemctl start mysqld
## 重新查看密码
[root@Mysql ~]# cat /var/log/mysqld.log
2019-04-06T07:40:50.513020Z 1 [Note] A temporary password is generated for root@localhost: Ai%u!dllz9#;
## 修改密码
[root@Mysql ~]# mysqladmin -uroot -p'Ai%u!dllz9#;' password "Sgy456.com"
## 用导入备份
[root@Mysql ~]# mysql -uroot -p'Sgy456.com' < /backup/mysql/2019-04-0400-mysql-all.sql
## 用原来的密码登陆
[root@Mysql ~]# mysql -uroot -p'Sgy123.com'建议在恢复备份时暂停 binlog 日志记录
## 关闭 binlog 记录 , 不然容易恢复增量失败
[root@sql mysql]# sed -i '23aSET sql_log_bin=0;' /backup/mysql/2019-04-0400-mysql-all.sql
## 在 Mysql 控制台临时修改不记录 binlog 日志
mysql> set sql_log_bin=0;
mysql> source /backup/mysql/2019-04-0400-mysql-all.sql增量备份与恢复
数据库完整备份+数据库增量备份
模拟：现在有一个运维人员误删除了数据库
## 备份之前数据准备
mysql> create database test;
mysql> use test
mysql> create table t1(id int,name varchar(30));
mysql> insert into t1 value (1,'zhangsan'),(2,'lisi'),(3,'wangwu'),(4,'zhaoliu');
mysql> select * from t1;
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
+------+----------+
## 基于当前数据完整备份
[root@Mysql ~]# mysqldump -uroot -p'Sgy123.com' --all-databases --single-transaction --master-data=1 --flush-logs > /backup/mysql/`date +%F%H`-mysql-all.sql
## 再插入数据
mysql> insert into t1 value (3,'wangwu'),(4,'zhaoliu');
mysql> select * from t1；
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
| 4 | zhaoliu |
+------+----------+
## 查看最新 binlog 记录位置
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 | 802963 | | | |
+------------------+----------+--------------+------------------+-------------------+模拟数据数据丢失
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'drop database test;'
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'show databases;'
+--------------------+
| Database |
+--------------------+
| information_schema |
| bin |
| mysql |
| performance_schema |
| sys |
+--------------------+恢复全备数据
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' < /backup/mysql/2019-04-0404-mysql-all.sql
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'show databases;'
+--------------------+
| Database |
+--------------------+
| information_schema |
| bin |
| mysql |
| performance_schema |
| sys |
| test |
+--------------------+
## 发现备份之后的数据没有恢复
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'select * from test.t1'
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
+------+----------+恢复增量数据
< 先根据数据丢失之前最后执行命令检索编号 mysqlbinlog -v /log/mysql_bin/mysql-bin.000001 | grep -4 "(3,'wangwu'),(4,'zhaoliu')"
[root@Mysql ~]# mysqlbinlog --stop-position=802963 /log/mysql_bin/mysql-bin.000001|mysql -uroot -p'Sgy123.com'
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'select * from test.t1'
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
| 4 | zhaoliu |
+------+----------+如果删除数据库又执行了其他的可以恢复时候把删除那条命令跳过
[root@Mysql ~]# mysqlbinlog --stop-position=803120 /log/mysql_bin/mysql-bin.000001 |mysql -uroot -p'Sgy123.com'
[root@Mysql ~]# mysqlbinlog --start-position=803344 /log/mysql_bin/mysql-bin.000001 |mysql -uroot -p'Sgy123.com'Mysql物理备份与恢复
percona-xtrabackup 物理备份+ binlog
开源免费并支持 Mysql 数据库热备份的软件，它能对 InnoDB 和 XtraDB 存储引擎的数据库非阻塞地备份。无需暂停服务备份 Mysql
支持增量备份
支持差异备份
备份不增加服务器负载
创建replication更加便捷
## 下载 rpm 包
[root@Mysql ~]# wget https://www.percona.com/downloads/Percona-XtraBackup-2.4/Percona-XtraBackup-2.4.13/binary/redhat/7/x86_64/percona-xtrabackup-24-2.4.13-1.el7.x86_64.rpm
## 用 YUM 安装（必须有 epel包）
[root@Mysql ~]# yum localinstall percona-xtrabackup-24-2.4.13-1.el7.x86_64.rpm -y完整备份与恢复
完整备份流程
## 创建备份目录
[root@Mysql ~]# mkdir /xtrabackup/
## 执行全备操作
[root@Mysql ~]# innobackupex --user=root --password="Sgy123.com" /xtrabackup/
## 检查备份结果
[root@Mysql ~]# ls /xtrabackup/
2019-04-06_07-56-46完全备份恢复流程
## 停止数据库
[root@Mysql ~]# systemctl stop mysqld
## 删除数据
[root@Mysql ~]# rm -rf /var/lib/mysql/*
## 重演回滚
[root@Mysql ~]# innobackupex --apply-log /xtrabackup/2019-04-06_07-56-46/
## 恢复数据
[root@Mysql ~]# innobackupex --copy-back /xtrabackup/2019-04-06_07-56-46/
## 修改权限
[root@Mysql ~]# chown -R mysql.mysql /var/lib/mysql/
## 启动数据库
[root@Mysql ~]# systemctl start mysqld
## 登陆数据库
[root@Mysql ~]# mysql -uroot -p'Sgy123.com'增量备份与恢复
增量备份全环境准备
## Mysql数据库数据
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'select * from test.t1;'
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
| 4 | zhaoliu |
+------+----------+
## 全备数据库
[root@Mysql ~]# innobackupex --user=root --password='Sgy123.com' /xtrabackup/
## 检查备份结果
[root@Mysql ~]# ls /xtrabackup/
2019-04-10_04-48-17增量备份流程
## 插入数据
mysql> insert into test.t1 value (5,'dasha'),(6,'ersha');
mysql> select * from test.t1;
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
| 4 | zhaoliu |
| 5 | dasha |
| 6 | ersha |
+------+----------+
## 基于全备份做增量备份
[root@Mysql ~]# innobackupex --user=root --password='Sgy123.com' --incremental /xtrabackup/ --incremental-basedir=/xtrabackup/2019-04-10_04-48-17/
## 检查备份结果
[root@Mysql ~]# ls /xtrabackup/
2019-04-10_04-48-17 2019-04-10_04-55-45
## 再次插入数据
mysql> use test
mysql> create table t2(name varchar(30),password varchar(50));
mysql> insert into t2 value ('dasha','123456'),('ersha','123456');
mysql> show tables;
+----------------+
| Tables_in_test |
+----------------+
| t1 |
| t2 |
+----------------+
mysql> select * from t2;
+-------+----------+
| name | password |
+-------+----------+
| dasha | 123456 |
| ersha | 123456 |
+-------+----------+
## 基于上一个增量备份做增量备份
[root@Mysql ~]# innobackupex --user=root --password='Sgy123.com' --incremental /xtrabackup/ --incremental-basedir=/xtrabackup/2019-04-10_04-55-45/
## 检查备份结果
[root@Mysql ~]# ls /xtrabackup/
2019-04-10_04-48-17 2019-04-10_04-55-45 2019-04-10_06-15-27模拟故障
## 停止数据库
[root@Mysql ~]# systemctl stop mysqld
## 删除数据
[root@Mysql ~]# rm -rf /var/lib/mysql/*依次重演
## 重演全备数据
[root@Mysql ~]# innobackupex --apply-log --redo-only /xtrabackup/2019-04-10_04-48-17/
## 重演第一次备份数据
[root@Mysql ~]# innobackupex --apply-log --redo-only /xtrabackup/2019-04-10_04-48-17/ --incremental-dir=/xtrabackup/2019-04-10_04-55-45/
## 重演第二次备份数据
[root@Mysql ~]# innobackupex --apply-log --redo-only /xtrabackup/2019-04-10_04-48-17/ --incremental-dir=/xtrabackup/2019-04-10_06-15-27/执行回滚
[root@Mysql ~]# innobackupex --copy-back /xtrabackup/2019-04-10_04-48-17/
[root@Mysql ~]# chown -R mysql.mysql /var/lib/mysql
[root@Mysql ~]# systemctl start mysqld
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'select * from test.t1;'
+------+----------+
| id | name |
+------+----------+
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
| 4 | zhaoliu |
| 5 | dasha |
| 6 | ersha |
+------+----------+
[root@Mysql ~]# mysql -uroot -p'Sgy123.com' -e 'select * from test.t2;'
+-------+----------+
| name | password |
+-------+----------+
| dasha | 123456 |
| ersha | 123456 |
+-------+----------+增量备份每一个都指向上一个备份，差异备份指向的是上一个完整备份