定时删除指定目录的过期文件(linux)

简介: 自研的云存储服务,经常会遇到碎片分片和过期文件的处理问题,最简单的处理方法就是启动一个定时任务定期删除过期的文件和分片。这就是今天本文要讨论的问题。

目录

前言

正文

一段一点问题

删除任务脚本

修改脚本权限

添加自动任务

查看自动任务状态


前言

自研的云存储服务,经常会遇到碎片分片和过期文件的处理问题。最简单的处理方法就是启动一个定时任务定期删除过期的文件和分片。这就是今天本文要讨论的问题。

正文

一段一点问题

启动定时删除任务一般会涉及到三个问题,其中,一个是位置问题,另两个是时间问题。位置问题大家都很好理解,就是要删除哪个目录下的文件。时间问题又可以成为“一段一点”,其中,“一段”就是多久的文件认为过期,换句话说就是哪个时间段内的文件是需要保留的;“一点”就是删除频率,比如每天临晨两点执行删除操作。

删除任务脚本

理解了上面的内容,就什么也不用多说啦。直接看删除任务脚本吧。

脚本内容如下:

#!/bin/bash
# 设置过期天数
EXPIRE_DAY=30
# 设置删除目录
FOLDER=/var/www/html/user-media/files
# 删除
find ${FOLDER} -mtime +${EXPIRE_DAY} -type d | xargs rm -rf
# find /var/www/html/user-media/files -mtime +20 -type d | xargs rm -rf
echo 'success'

将上述脚本保存为 autoDelTask.sh 文件。

注意:EXPIRE_DAY = 30 语句中是不能存在空格的。

修改脚本权限

为了可以执行上面的脚本,接下来需要修改脚本权限,命令如下:

chmod 755 autoDelTask.sh

添加自动任务

好了,最后一步了,我们需要把这个脚本设置成系统的定时任务。

添加自动任务,命令如下:

crontab –e

粘贴下面的命令到文件中:

0 13 * * * /root/work/bag/autoDelTask.sh >> /root/work/bag/autoDelTask.log

有些小伙伴看到上述命令语句可能会蒙圈,不禁会问:都啥呀???

这里稍微解释一下:

前面六个字段分别是分、时、日、月、周、命令。其中,

第1列的 * 号表示分钟1-59 每分钟用*或者 */1表示;

第2列的 * 号表示小时0-23小时(其中,0表示0点);

第3列的 * 号表示日期1-31日;

第4列的 * 号表示月份1-12月;

第5列的 * 号表示每周,0-6(其中,0表示星期天);

第6列表示要运行的命令。

另外,>>  表示保存日志到指定文件中。


通过上面的解释,我们也就理解了刚才粘贴的命令的意思了。是的,上面命令的意思就是每天下午1点开始执行清理任务,保留最近30天的文件。

查看自动任务状态

启动任务后,如果不确定定时任务是否已经生效了,可以使用如下命令查看定时任务的状态:

crontab -l

如果可以看到对应的任务列表,就表示已经设置成功了。

image.png

作者简介:大家好,我是 Data-Mining(liuzhen007),是一位音视频技术爱好者,前后就职于传统广电巨头和音视频互联网公司,具有丰富的音视频直播和点播相关经验,对 WebRTC、FFmpeg 和 Electron 有非常深入的了解。同时也是 CSDN 博客专家、华为云享专家、InfoQ 签约作者,欢迎关注我分享更多干货!


目录
相关文章
|
24天前
|
Linux
关于Linux目录访问函数总结
关于Linux目录访问函数总结
13 1
|
25天前
|
Linux Shell
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
Linux手动清理Linux脚本日志定时清理日志和log文件执行表达式
78 1
|
24天前
|
人工智能 安全 Linux
【Linux】Linux之间如何互传文件(详细讲解)
【Linux】Linux之间如何互传文件(详细讲解)
|
1天前
|
人工智能 Linux
Linux查找大文件的方法
Linux查找大文件的方法
|
3天前
|
固态存储 Ubuntu Linux
Linux(29) 多线程快速解压缩|删除|监视大型文件
Linux(29) 多线程快速解压缩|删除|监视大型文件
11 1
|
3天前
|
Ubuntu Linux 数据安全/隐私保护
Linux(24) 如何在Ubuntu中操作rootfs.img文件
Linux(24) 如何在Ubuntu中操作rootfs.img文件
9 0
|
8天前
|
安全 Linux 开发工具
Linux中可引起文件时间戳改变的相关命令
【4月更文挑战第12天】Linux中可引起文件时间戳改变的相关命令
18 0
|
10天前
|
Linux Shell 开发工具
Linux文件常用操作
Linux文件常用操作(几乎覆盖所有日常使用)
84 0
|
11天前
|
Linux 内存技术 Perl
【ZYNQ】制作从 QSPI Flash 启动 Linux 的启动文件
【ZYNQ】制作从 QSPI Flash 启动 Linux 的启动文件
|
16天前
|
Linux
linux 超过4个G的文件传不上去的解决办法
linux 超过4个G的文件传不上去的解决办法
9 0