实现docker镜像中使用crontab定时删除n天前日志

以你之姓@ 2022-11-17 05:51 524阅读 0赞

> 其实这篇文章承接前面的文章，ECS机器环境下可以直接页面配置机器日志定时删除任务，但接入云原生环境后，暂时还没有页面工具来配置定时任务，千台机器，多个日志，总不能一个个删除吧，于是就想到在docker镜像中通过写入crontab脚本来实现定时删除n天前日志

我的机器：Linux Centos7机器

先了解一下

# 关于定时任务的配置目录 #

> /etc/crontab 文件, 系统级别的定时任务,需要加入用户名

> /var/spool/cron 目录, 以用户作为区分,一般会有一个和用户名相同的文件,里面记录了定时任务, 一般使用 crontab -e 创建, 语法中不需要指定用户名

> /etc/cron.d/ 和 crontab 文件类似,需要指定用户名

cron执行时，也就是要读取三个地方的配置文件

由于机器比较多，试错成本会比较大，所以可以先在单机执行验证

# 一、单机操作验证 #

## 1.创建定时任务脚本: del\_log.sh ##

touch del_log.sh

## 2.授权 chmod +x ./del\_log.sh ##

## 3.删除 3天的日志文件 ##

vim del_log.sh

#!/usr/bin/env bash
    #/home/logs为想删除日志所在的路径，前后加的两句输出可以验证是否执行了该文件
    echo "Cleaning old logs..."
    find /home/logs -mtime +3 -name "*.log.*" -exec rm -rf { } \;
    echo "Done for cleaning old logs."

## 4.创建定时任务crontab ##

crontab -e , 添加一个定时任务, 或者 vim /etc/crontab 添加一条记录

#每天 0 点 10 分运行该命令文件
    #为了方便验证，可以改为分钟级别或者几分钟后
    10 0 * * * /home/cron/del_log.sh >> /var/log/cron.log 2>&1

具体时间设置可以参考下面

# For details see man 4 crontabs
    
        # Example of job definition:
        # .---------------- minute (0 - 59)
        # | .------------- hour (0 - 23)
        # | | .---------- day of month (1 - 31)
        # | | | .------- month (1 - 12) OR jan,feb,mar,apr ...
        # | | | | .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat
        # | | | | |
        # * * * * * user-name command to be executed

## 5.重启定时任务或重启机器 ##

（1）重启定时任务systemctl restart crond , 在 Ubuntu 上叫 cron systemctl restart cron  
（2）重启机器，我是选择重启的机器

重启后，我的日志顺利被删除了，说明脚本OK，可以尝试在镜像中写了

## ⚠️注意 ##

*  执行脚本使用/bin/sh（防止脚本无执行权限）
 *  要执行的文件路径是从根开始的绝对路径（防止找不到文件）
 *  尽量把要执行的命令放在脚本里，然后把脚本放在定时任务里。对于调用脚本的定时任务，可以把标准输出错误输出重定向到空。
 *  定时任务中带%无法执行，需要加\\转义
 *  如果时上有值，分钟上必须有值；日和周不要同时使用，会冲突

# 二、docker镜像中使用crontab定时删除n天前日志 #

前面单机测试说的就比较多了，下面就简单一些

## 1.创建定时任务脚本del\_log.sh ##

#!/usr/bin/env bash
    #定时删除日志
    a=$(date)
    echo -e "startTime:\t$a"
    #找到/home/logs下符合"*.log.*格式的三天前的日志进行删除
    find /home/logs -mtime +3 -name "*.log.*" -exec rm -rf { } \;
    echo "Done for cleaning old logs.."

## 2.创建定时任务文件root ##

#凌晨3点整执行/etc/del_log.sh脚本，并输出到/var/log/cron.log
    #这个路径下的/etc/del_log.sh是后面Dockerfile文件复制过去的
    00 03 * * * /etc/del_log.sh >> /var/log/cron.log 2>&1

注意：这个文件要留出空行，否则会报premature EOF错误

## 3.追加如下命令到Dockerfile中 ##

RUN yum -y install sysstat
    RUN yum -y install crontabs
    COPY del_log.sh /etc/del_log.sh
    COPY root /etc/cron.d/root
    COPY root /var/spool/cron
    RUN chmod +x /etc/del_log.sh && crontab /etc/cron.d/root
    #解决crontab执行权限问题
    RUN sed -i "s/required/sufficient/g" /etc/pam.d/crond

这个启动脚本通常在Dockerfile的CMD中被执行，加到最后一行

CMD crontab /etc/root && service crond start && crontab -l

最后，通过tail -f /var/log/cron.log验证定时任务是否执行或者直接看日志是否被删除

--------------------

这里我也做了一个测试，把删除日志时间改为几分钟后进行了，验证，结果也是OK的

当然这里直接改为凌晨3点执行，第二天验证照样是OK的，不过中间确实走了不少坑，大家有疑问可以留言相互交流