MYSQL relay_logs 日志清理

忘是亡心i 2024-02-18 22:38 43阅读 0赞

情景

MySQL数据库主从复制在缺省情况下从库的relay logs会在SQL线程执行完毕后被自动删除，（默认relay\_log\_purge=1）但是对于MHA场景下，对于某些滞后从库的恢复依赖于其他从库的relay log，因此采取禁用自动删除功能以及定期清理的办法,从而避免对于清理过多过大的relay log需要注意引起的复制延迟资源开销等。MHA可通过purge\_relay\_logs脚本及配合cronjob来完成此项任务，具体描述如下：

1、purge\_relay\_logs的功能  
a、为relay日志创建硬链接(最小化批量删除大文件导致的性能问题)  
b、SET GLOBAL relay\_log\_purge=1; FLUSH LOGS; SET GLOBAL relay\_log\_purge=0;  
c、删除relay log（rm –f /path/to/archive\_dir/\*）

2、purge\_relay\_logs的用法及相关参数  
\#\#\#用法  
\# purge\_relay\_logs --help  
Usage:  
purge\_relay\_logs --user=root --password=rootpass --host=127.0.0.1  
\#\#\#参数描述  
\--user mysql 用户名，缺省为root  
\--password mysql 密码  
\--port 端口号  
\--host 主机名，缺省为127.0.0.1  
\--workdir 指定创建relay log的硬链接的位置，默认是/var/tmp，成功执行脚本后，硬链接的中继日志文件被删除  
由于系统不同分区创建硬链接文件会失败，故需要执行硬链接具体位置，建议指定为relay log相同的分区  
\--disable\_relay\_log\_purge 默认情况下，参数relay\_log\_purge=1，脚本不做任何处理，自动退出  
设定该参数，脚本会将relay\_log\_purge设置为0，当清理relay log之后，最后将参数设置为OFF(0)

3、定制清理relay log cronjob  
pureg\_relay\_logs脚本在不阻塞SQL线程的情况下自动清理relay log。  
对于不断产生的relay log直接将该脚本部署到crontab以实现按天或按小时定期清理。  
$ crontab -l  
\# purge relay logs at 5am  
0 5 \* \* \* /usr/bin/purge\_relay\_logs --user=root --password=PASSWORD --disable\_relay\_log\_purge >> /var/log/masterha/purge\_relay\_logs.log 2>&1

4、手动清理示例  
\# purge\_relay\_logs --user=mha --password=mha --disable\_relay\_log\_purge

主要有两种方式：

方式一：

通过MHA中自带的工具 purge\_relay\_logs 工具来删除。

步骤：  
1、创建工作目录  
目的为了提高性能，这个工作目录必须跟mysql在同一个磁盘分区  
mkdir -p /data/mha\_tmp

2、purge relay logs  
/usr/bin/purge\_relay\_logs --user=USERNAME --password=PASSWORD --host=Mysql\_IP --disable\_relay\_log\_purge --workdir=/data/mha\_tmp 2>&1  
加入到crontab中  
0 4 \* \* \* /usr/bin/purge\_relay\_logs --user=USERNAME --password=PASSWORD --host=Mysql\_IP --disable\_relay\_log\_purge --workdir=/data/mha\_tmp 2>&1  
说明：  
–disable\_relay\_log\_purge：自动设置”relay\_log\_purge = 1“

方式二：  
手动删除 relay log  
1. 设置relay\_log\_purge = 1  
SET GLOBAL relay\_log\_purge = 1  
2. flush logs  
通过管理员用户登陆从数据库，然后执行下面命令：  
flush logs;  
可以执行多次！  
注意：观察堆积的relay logs日志是否已经删除，如果删除，直接执行下面第6步“恢复relay\_log\_purge = 0“；如果未删除，继续从下面第3步”停止slave“往下操作！！！

3. 停止slave  
通过管理员用户登陆从数据库，然后执行下面命令：  
stop slave;  
4. 删除relay logs  
可以通过rm直接删除relay logs  
通使用下面方式安全删除：  
(1) 统计所有关于relay的文件（包括 relay\_log\_name.index）总个数  
ls -A1 |grep relay | sort -rn | wc -l  
(2) 列出要删除所有有关relay的文件：  
ls -A1 |grep relay | sort -rn | tail -n 100  
说明： 100 为要删除的relay logs 数量  
(3) 确定没有问题，删除relay logs：  
ls -A1 |grep relay | sort -rn | tail -n 100 | xargs rm -rf \{\}  
注意：

要保留最新的两个relay log  
要保留relay log的index文件  
relay log的index一般命名为： relay\_log\_name.index  
例如： relay-bin.index  
5. 启动slave  
通过管理员用户登陆从数据库，然后执行下面命令：  
start slave;  
6 . 恢复relay\_log\_purge = 0  
通过管理员用户登陆从数据库，然后执行下面命令：  
SET GLOBAL relay\_log\_purge=0;  
扩展  
如果你对从数据库要求不高，可以将relay\_log\_purge = 1