Mysql备份与恢复

使用xtrabackup

xtrabackup安装

#on ubuntu
wget https://repo.percona.com/apt/percona-release_latest.$(lsb_release -sc)_all.deb
dpkg -i percona-release_latest.$(lsb_release -sc)_all.deb
percona-release enable-only tools release
apt update
apt install percona-xtrabackup-80 qpress lz4 percona-toolkit -y

#on centos
yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm -y
percona-release enable-only tools release
yum install percona-xtrabackup-80 lz4 -y

备份

vi backup.sh
#!/bin/bash

#perconna xtrabackup
xtrabackup --compress --compress-threads=4  --datadir=/data/mysql/data/ --host=127.0.0.1  \
--user=gaojinbo --password=gaojinbo.com --databases-exclude=arch \
--tables-exclude=call_log,device_log \
--backup --parallel=4 --target-dir=/data/backups/`date +%F_%H`

cd /data/backups
find /data/backups -maxdepth 1 -type d -mtime +5 -exec rm -fr {} \;

#backup to obs
/usr/bin/obsutil cp /data/backups/ obs://gaojinbo-backup/db/2025/ -f -r -u

恢复

yum install qpress -y
xtrabackup --decompress --parallel=16 --target-dir=/data/backups/2024-05-20_21/
xtrabackup --prepare --apply-log-only --parallel=16 --target-dir=/data/backups/2024-05-20_21
xtrabackup --defaults-file=/etc/my.cnf --copy-back --parallel=16  --target-dir=/data/backups/2024-05-20_21
chown -R mysql:mysql /var/lib/mysql

#恢复华为云rds备份到自建mysql
#下载qp备份文件并解压
mkdir rds-gaojinbo
xbstream -xv -p4 -C rds-gaojinbo <rds-gaojinbo.qp
#然后使用xtrabackup进行恢复

使用mydumper

备份

apt install -y mydumper

vi backup.sh
#!/bin/bash

#mydumper backup
mydumper -h localhost -u gaojinbo --password="gaojinbo.com" --compress --use-savepoints  --kill-long-queries\
--regex '^(?!(performance_schema|information_schema|test|sys))' \
--outputdir /data/backups/`date +%F_%H_%M`

cd /data/backups
find /data/backups -maxdepth 1 -type d -mtime +5 -exec rm -fr {} \;

#backup to obs
/usr/bin/obsutil cp /data/backups/ obs://gaojinbo-backup/db/2025/ -f -r -u

#mydumper参数
-B, --database              要备份的数据库，不指定则备份所有库
-T, --tables-list           需要备份的表，名字用逗号隔开
-o, --outputdir             备份文件输出的目录
-s, --statement-size        生成的insert语句的字节数，默认1000000
-r, --rows                  将表按行分块时，指定的块行数，指定这个选项会关闭 --chunk-filesize
-F, --chunk-filesize        将表按大小分块时，指定的块大小，单位是 MB
-c, --compress              压缩输出文件
-e, --build-empty-files     如果表数据是空，还是产生一个空文件（默认无数据则只有表结构文件）
-x, --regex                 是同正则表达式匹配 'db.table'
-i, --ignore-engines        忽略的存储引擎，用都厚分割
-m, --no-schemas            不备份表结构
-k, --no-locks              不使用临时共享只读锁，使用这个选项会造成数据不一致
--less-locking              减少对InnoDB表的锁施加时间（这种模式的机制下文详解）
-l, --long-query-guard      设定阻塞备份的长查询超时时间，单位是秒，默认是60秒（超时后默认mydumper将会退出）
--kill-long-queries         杀掉长查询 (不退出)
-b, --binlogs               导出binlog
-D, --daemon                启用守护进程模式，守护进程模式以某个间隔不间断对数据库进行备份
-I, --snapshot-interval     dump快照间隔时间，默认60s，需要在daemon模式下
-L, --logfile               使用的日志文件名(mydumper所产生的日志), 默认使用标准输出
--tz-utc                    跨时区是使用的选项，不解释了
--skip-tz-utc               同上
--use-savepoints            使用savepoints来减少采集metadata所造成的锁时间，需要 SUPER 权限
--success-on-1146           Not increment error count and Warning instead of Critical in case of table doesn't exist
-h, --host                  连接的主机名
-u, --user                  备份所使用的用户
-p, --password              密码
-P, --port                  端口
-S, --socket                使用socket通信时的socket文件
-t, --threads               开启的备份线程数，默认是4
-C, --compress-protocol     压缩与mysql通信的数据
-V, --version               显示版本号
-v, --verbose               输出信息模式, 0 = silent, 1 = errors, 2 = warnings, 3 = info, 默认为 2

恢复

myloader -u gaojinbo --password="gaojinbo.com" -d /data/backups/2024-05-20_22

#myloader 参数
-d, --directory                   备份文件的文件夹
-q, --queries-per-transaction     每次事物执行的查询数量，默认是1000
-o, --overwrite-tables            如果要恢复的表存在，则先drop掉该表，使用该参数，需要备份时候要备份表结构
-B, --database                    需要还原的数据库
-e, --enable-binlog               启用还原数据的二进制日志
-h, --host                        主机
-u, --user                        还原的用户
-p, --password                    密码
-P, --port                        端口
-S, --socket                      socket文件
-t, --threads                     还原所使用的线程数，默认是4
-C, --compress-protocol           压缩协议
-V, --version                     显示版本
-v, --verbose                     输出模式, 0 = silent, 1 = errors, 2 = warnings, 3 = info, 默认为2

使用mysqldump

备份

#备份单个数据库
mysqldump -u root -pgaojinbo.com mydatabase > mydatabase_backup.sql
#备份多个数据库
mysqldump -u root -pgaojinbo.com db1 db2 > databases_backup.sql
#备份特定表
mysqldump -u root -pgaojinbo.com mydatabase table1 table2 > tables_backup.sql

mysqldump实用参数解析

1. 数据库备份参数
-u：指定用户名。
-p：指定密码，如果使用此参数，mysqldump会提示用户输入密码。
-h：指定数据库服务器的主机名或IP地址。
-P：指定数据库服务器的端口号。
--all-databases：备份所有数据库。
--databases：指定要备份的数据库列表，多个数据库用空格分隔。
2. 表备份参数
--ignore-table=database.table：忽略指定的表。
--add-drop-table：在CREATE TABLE语句前添加DROP TABLE语句，以确保备份的表在导入时被正确地删除。
--create-options：在CREATE TABLE语句中包含所有MySQL支持的选项。
3. 备份文件参数
--single-transaction：使用InnoDB表时，在备份开始之前启动一个事务，以确保备份的一致性。
--quick：尽量减少锁表时间。
--lock-tables：在备份前锁定所有表。
--skip-lock-tables：跳过锁定表，可能会影响备份的一致性。
--compress：压缩输出文件。
--result-file=file：将输出写入指定的文件。
4. 其他参数
--default-character-set=charset：指定默认字符集。
--events：备份数据库的事件调度器信息。
--routines：备份数据库的存储过程和函数。

恢复

mysql -u root -pgaojinbo.com mydatabase < mydatabase_backup.sql