MySQL8备份恢复（三）

ゝ一纸荒年。 2024-03-24 15:16 32阅读 0赞

### 普通文件备份恢复 ###

也就是冷备，关闭实例，复制实例相关的数据文件夹

**备份**

#停止mysql
    systemctl stop mysql
    #复制数据文件
    rsync -av /var/lib/mysql /backups #或者复制到远程主机 rsync -e ssh -az /var/lib/mysql backup_user@remote_server:/backups
    #启动mysql
    systemctl start mysql

**恢复**

#停止mysql
    systemctl stop mysql
    #将文件移到数据目录
    mv /backups/mysql /var/lib
    #更改属主
    chown -R mysql:mysql /var/lib/mysql
    #启动mysql
    systemctl start mysql

### xtrabackup备份恢复 ###

**安装xtrabackup**

#注意: 必须先安装libev, centos6 中 libdev 在 epel 源中
    yum -y install libev
    yum -y localinstall mysql-community-libs-compat-8.0.18-1.el7.x86_64.rpm
    yum -y install https://repo.percona.com/yum/percona-release-latest.noarch.rpm
    
    #在线安装
    yum -y install percona-xtrabackup-80
    #本地安装
    yum -y localinstall percona-xtrabackup-80-8.0.13-1.el7.x86_64.rpm
    
    #启用存储库
    percona-release enable-only tools release
    #安装压缩备份工具
    yum -y install https://repo.percona.com/yum/release/7/RPMS/x86_64/qpress-11-1.el7.x86_64.rpm

**全量备份**

#准备数据
    truncate table T1;
    insert into T1(c_guid,c_time) value(uuid(),now());
    
    [ -d /data/xbackups/base ] || mkdir -p /data/xbackups/base
    xtrabackup --defaults-file=/etc/my.cnf --host=localhost --port=3306 --user=root --password=******** --backup --target-dir=/data/xbackups/base/
    #查看 LSN 区间 全备的 lsn 是从 0 开始的
    #cat /data/xbackups/base/xtrabackup_checkpoints
    backup_type = full-backuped
    from_lsn = 0
    to_lsn = 19991341
    last_lsn = 19991351
    flushed_lsn = 0
    #cat /data/xbackups/base/xtrabackup_binlog_info
    binlog.000006   155
    
    #也可以使用参数--datadir 替换掉参数 --defaults-file
    xtrabackup --host=localhost --port=330 --user=root --password=******** --datadir=/var/lib/mysql/ --backup --target-dir=/data/xbackups/base

**从全量备份恢复**

#插入1笔数据
    insert into T1(c_guid,c_time) value(uuid(),now());
    #破坏掉运行的数据库实例,20210429测试必须保留 mysql 空文件夹,否则恢复后重启失败,对 ./binlog.index 无权限, 原因未查明
    systemctl stop mysqld
    bak_dir=$(date +%Y%m%d%H%M%S) ; cd /var/lib ; mkdir mysql.${bak_dir} ; mv mysql/* mysql.${bak_dir}/  
    
    #全备份准备
    xtrabackup --prepare --target-dir=/data/xbackups/base/
    #回拷数据
    xtrabackup --datadir=/var/lib/mysql --copy-back --target-dir=/data/xbackups/base/
    #也可以使用 rsync -avrP /data/xbackups/base/ /var/lib/mysql/ 或 cp 复制过去
    #如果使用 --move-back 替换 --copy-back 则是移动
    
    #修改目录属性启动数据库
    chown -R mysql:mysql /var/lib/mysql ; chmod -R 755 /var/lib/mysql
    systemctl start mysqld
    #全备之后的数据会丢失,需要根据二进制日志进行基于时间点的恢复,参考 "从增量备份恢复"

**增量备份**

#准备数据
    truncate table T1;
    insert into T1(c_guid,c_time) value(uuid(),now());
    
    #首先全备份
    [ -d /data/xbackups/base ] || mkdir -p /data/xbackups/base
    xtrabackup --defaults-file=/etc/my.cnf --host=localhost --port=3306 --user=root --password=******** --backup --target-dir=/data/xbackups/base/
    
    #插入1笔数据
    insert into T1(c_guid,c_time) value(uuid(),now());
    #第一次增量备份,在前面全备份的基础上
    [ -d /data/xbackups/inc1 ] || mkdir -p /data/xbackups/inc1
    xtrabackup --defaults-file=/etc/my.cnf --host=localhost --port=3306 --user=root --password=******** --backup --parallel=3 --target-dir=/data/xbackups/inc1 --incremental-basedir=/data/xbackups/base
    
    #插入1笔数据
    insert into T1(c_guid,c_time) value(uuid(),now());
    #根据上次增量再来一次增量(如果根据上次全备来一次增量, 则本次增量备份和上次全备之间的增量需要用与恢复)
    [ -d /data/xbackups/inc2 ] || mkdir -p /data/xbackups/inc2
    xtrabackup --defaults-file=/etc/my.cnf --host=localhost --port=3306 --user=root --password=******** --backup --parallel=3 --target-dir=/data/xbackups/inc2 --incremental-basedir=/data/xbackups/inc1
    
    #查看 LSN 区间 全备的 lsn 是从 0 开始的,增量从上一次备份结束的 lsn 开始
    # cat /data/xbackups/base/xtrabackup_checkpoints
    backup_type = full-backuped
    from_lsn = 0
    to_lsn = 20113970
    last_lsn = 20113980
    flushed_lsn = 0
    # cat /data/xbackups/inc1/xtrabackup_checkpoints
    backup_type = incremental
    from_lsn = 20113970
    to_lsn = 20117021
    last_lsn = 20117031
    flushed_lsn = 0
    # cat /data/xbackups/inc2/xtrabackup_checkpoints
    backup_type = incremental
    from_lsn = 20117021
    to_lsn = 20117472
    last_lsn = 20117482
    flushed_lsn = 0
    #备份会切换日志
    # cat /data/xbackups/base/xtrabackup_binlog_info
    binlog.000020   155
    # cat /data/xbackups/inc1/xtrabackup_binlog_info
    binlog.000021   155
    # cat /data/xbackups/inc2/xtrabackup_binlog_info
    binlog.000022   155

**从增量备份恢复**

#建议把备份的目录再次备份,防止在还原的时候误操作,导致备份不可用
    cd /data/backups
    cp -a base base.bak ; cp -a inc1 inc1.bak  ; cp -a inc2 inc2.bak
    #准备全备份的日志: 
    xtrabackup --prepare --apply-log-only --target-dir=/data/backups/base
    
    #应用第一次增量
    xtrabackup --prepare --apply-log-only --target-dir=/data/backups/base --incremental-dir=/data/backups/inc1
    #查看LSN,可以看到last_lsn已经被应用和第1次全量备份的位置相同了
    #cat /data/backups/base/xtrabackup_checkpoints
    backup_type = log-applied
    from_lsn = 0
    to_lsn = 20117021
    last_lsn = 20117031
    flushed_lsn = 0
    
    #应用第二个也是最后一个增量,如果是多个增量,只有最后一个不需要 apply-log-only
    #如果最后一次使用了--apply-log-only 备份仍是一致的, 但服务器会前滚
    xtrabackup --prepare --target-dir=/data/backups/base --incremental-dir=/data/backups/inc2
    #查看LSN,可以看到last_lsn已经被应用和第2次全量备份的位置相同了
    #cat /data/backups/base/xtrabackup_checkpoints
    backup_type = full-prepared
    from_lsn = 0
    to_lsn = 20117472
    last_lsn = 20117482
    flushed_lsn = 0
    
    #接下来和从全量恢复相同
    
    #插入1笔数据
    insert into T1(c_guid,c_time) value(uuid(),now());
    #破坏掉运行的数据库实例,20210429测试必须保留 mysql 空文件夹,否则恢复后重启失败,对 ./binlog.index 无权限,原因未查明
    systemctl stop mysqld
    bak_dir=$(date +%Y%m%d%H%M%S) ; cd /var/lib ; mkdir mysql.${bak_dir} ; mv mysql/* mysql.${bak_dir}/  
    #保留备份之后的 binglog 文件和 binlog.index ib_logfile0/ib_logfile1
    
    #回拷数据
    xtrabackup --datadir=/var/lib/mysql --copy-back --target-dir=/data/backups/base/
    #修改目录属性启动数据库
    chown -R mysql:mysql /var/lib/mysql ; chmod -R 755 /var/lib/mysql
    systemctl start mysqld
    #最后一次备份之后的数据会丢失
    #开始基于时间点的恢复
    # cat /data/backups/base/xtrabackup_binlog_info
    binlog.000022   155
    根据输出的日志位置,导出二进制日志重定向到sql文件, 也就是说备份工作只备份到输出的日志文件和位置,之后的事务,只能使用二进制日志恢复
    mysqlbinlog -j 155 binlog.000022 > /data/backups/timepoint.sql
    mysql -h localhost --port=3306 -u root -p******** < /data/backups/timepoint.sql

**压缩备份**

#compress使用的 qpress 工具需要安装, 需要启用存储库: percona-release enable-only tools release
    [ -d /data/xbackups_compressed ] || mkdir -p /data/xbackups_compressed/
    xtrabackup --defaults-file=/etc/my.cnf --host=localhost --port=3306 --user=root --password=******** --backup --parallel=4 --compress --compress-threads=4 --target-dir=/data/xbackups_compressed/

**从压缩备份恢复**

#解压缩
    xtrabackup --decompress --decompress-threads=4 --remove-original --target-dir=/data/xbackups_compressed/
    #说明: --parallel 参数可以同时解压多个文件, --remove-original 可以在解压后删除源文件, 不删除恢复时也不会复制原文件
    
    #接下来和从全量恢复相同, 只是目录不同
    systemctl stop mysqld
    bak_dir=$(date +%Y%m%d%H%M%S) ; cd /var/lib ; mkdir mysql.${bak_dir} ; mv mysql/* mysql.${bak_dir}/  
    xtrabackup --prepare --target-dir=/data/xbackups_compressed/
    xtrabackup --datadir=/var/lib/mysql --copy-back --target-dir=/data/xbackups_compressed/
    chown -R mysql:mysql /var/lib/mysql
    chmod -R 755 /var/lib/mysql
    systemctl start mysqld

**备份到异地**

#先建立ssh信任
    ssh root@192.168.55.44 "[ -f /data/xbackups/`date +%Y%m%d` ] || mkdir -p /data/xbackups/`date +%Y%m%d`"
    
    xtrabackup --host=localhost --port=3306 --user=root --password=******** --no-lock --backup --parallel=4 --compress --compress-threads=4 --stream=xbstream --target-dir=./ | ssh root@192.168.55.44 "xbstream -x -C /data/xbackups/`date +%Y%m%d`/ --parallel=4 --decompress --decompress-threads=4"