数据库备份与恢复（mydumper) 详

数据库定时备份及恢复（mydumper)

mydumper备份数据库

安装命令：
`yum -y install https://github.com/maxbube/mydumper/releases/download/v0.9.3/mydumper-0.9.3-41.el7.x86_64.rpm`

地址：https://github.com/maxbube/mydumper/releases，请根据自己的系统类型选择下载版本。

yum -y install https://github.com/maxbube/mydumper/releases/download/v0.9.3/mydumper-0.9.3-41.el7.x86_64.rpm

备份脚本.sh

echo 'hello world'
echo '开始备份数据库'
DATE=$(date +%Y%m%d)
echo DATE 
nohup mydumper -u root -p 密码 -P 3306 -h 192.168.1.xxx -o /home/data/eplusdb/backup_eplus$(date +%Y%m%d)  -v 3 -t 64 >/home/data/eplusdb/log/nohup$(date +%Y%m%d).log 2>&1 
nohup tar -zcvf /home/data/eplusdb/backup_eplus$(date +%Y%m%d).tar.gz /home/data/eplusdb/backup_eplus$(date +%Y%m%d) 

指定数据库排除数据库

新版本里已经不能备份binlog了，没有-b参数。这里说明下备份指定数据库的方法：--regex 正则匹配

#指定备份数据库：备份abc、bcd、cde
mydumper -u backup -p 123456  -h 192.168.180.13 -P 3306 -t 3 -c -l 3600 -s 10000000 -e --regex 'abc|bcd|cde' -o bbb/

#指定不备份的数据库：不备份abc、mysql、test，备份其他数据库 
mydumper -u backup -p 123456  -h 192.168.180.13 -P 3306 -t 3 -c -l 3600 -s 10000000 -e --regex '^(?!(abc|mysql|test))' -o bbb/
3）还原，表存在先删除（-o）：这里需要注意，使用该参数，备份目录里面需要有表结构的备份文件。

./myloader -u root -p 123456 -h 192.168.200.25 -P 3306 -o -B test -d /home/zhoujy/bak/

删除备份数据脚本.sh

echo '删除七天之前的备份文件'
echo '开始删除'
echo rm -rf /home/data/erpdb/backup$(date +%Y%m%d -d -7day).tar.gz
rm -rf  /home/data/erpdb/backup$(date +%Y%m%d -d -7day).tar.gz
echo rm -rf  /home/data/eplusdb/backup_eplus$(date +%Y%m%d -d -7day).tar.gz
rm -rf  /home/data/eplusdb/backup_eplus$(date +%Y%m%d -d -7day).tar.gz
echo '删除成功'

定时任务crond

每天5点、每天24点
 0 5 * * * /home/software/backup/backup_eplus.sh
#0 0 * * * /home/software/backup/backup.sh
0 0 * * * /home/software/backup/delBackup.sh

脚本执行权限设置

chmod +x /home/data/dumper/backup_eplus.sh 

报错信息

  -l, --long-query-guard      设置长查询时间,默认60秒，超过该时间则会报错：There are queries in PROCESSLIST running longer than 60s, aborting dump
  -K, --kill-long-queries kill掉长时间执行的查询，备份报错：Lock wait timeout exceeded; try restarting transaction

-B, --database              要备份的数据库，不指定则备份所有库
-T, --tables-list           需要备份的表，名字用逗号隔开
-o, --outputdir             备份文件输出的目录
-s, --statement-size        生成的insert语句的字节数，默认1000000
-r, --rows                  将表按行分块时，指定的块行数，指定这个选项会关闭 --chunk-filesize
-F, --chunk-filesize        将表按大小分块时，指定的块大小，单位是 MB
-c, --compress              压缩输出文件
-e, --build-empty-files     如果表数据是空，还是产生一个空文件（默认无数据则只有表结构文件）
-x, --regex                 是同正则表达式匹配 'db.table'
-i, --ignore-engines        忽略的存储引擎，用都厚分割
-m, --no-schemas            不备份表结构
-k, --no-locks              不使用临时共享只读锁，使用这个选项会造成数据不一致
--less-locking              减少对InnoDB表的锁施加时间（这种模式的机制下文详解）
-l, --long-query-guard      设定阻塞备份的长查询超时时间，单位是秒，默认是60秒（超时后默认mydumper将会退出）
--kill-long-queries         杀掉长查询 (不退出)
-b, --binlogs               导出binlog---已被XX
-D, --daemon                启用守护进程模式，守护进程模式以某个间隔不间断对数据库进行备份
-I, --snapshot-interval     dump快照间隔时间，默认60s，需要在daemon模式下
-L, --logfile               使用的日志文件名(mydumper所产生的日志), 默认使用标准输出
--tz-utc                    跨时区是使用的选项，不解释了
--skip-tz-utc               同上
--use-savepoints            使用savepoints来减少采集metadata所造成的锁时间，需要 SUPER 权限
--success-on-1146           Not increment error count and Warning instead of Critical in case of table doesn't exist
-h, --host                  连接的主机名
-u, --user                  备份所使用的用户
-p, --password              密码
-P, --port                  端口
-S, --socket                使用socket通信时的socket文件
-t, --threads               开启的备份线程数，默认是4
-C, --compress-protocol     压缩与mysql通信的数据
-V, --version               显示版本号
-v, --verbose               输出信息模式, 0 = silent, 1 = errors, 2 = warnings, 3 = info, 默认为 2

数据库恢复

命令

恢复备份文件中的所有：
myloader -u rant -p 123456 -P 3306 -h 172.16.1.xx  -d /home/data/eplusdb/backup_eplus202112xx
恢复备份文件中的指定库：
myloader -u rant -p 123456 -P 3306 -h 172.16.1.xx  -d /home/data/eplusdb/backup_eplus202112xx

常见问题

>Error connection to database: Access denied for user 'ts'@'eplus-xxl' (using password: YES)
--当前主机连不到要恢复的mysql数据库
解决：
create user  rant@'172.16.1.243' IDENTIFIED by '123456';
grant all  privileges on *.* to rant@'172.16.1.243' ;

>Error connection to database: Authentication plugin 'caching_sha2_password' cannot be loaded:、、、、、、
--需要修改当前密码验证类型
解决：
ALTER USER rant@'172.16.1.243'  identified  WITH mysql_native_password BY '123456';
--如果执行命令出错，提示权限不对
grant system_user on *.* to 'root';

也可能通过navicat客户端新建用户

相关链接(问题解决)：

https://blog.csdn.net/weixin_42348049/article/details/105153303
https://blog.csdn.net/weixin_42330311/article/details/104728396
https://blog.csdn.net/qq_32486599/article/details/73603243