定时删除指定目录的过期文件(linux)

简介: 自研的云存储服务,经常会遇到碎片分片和过期文件的处理问题,最简单的处理方法就是启动一个定时任务定期删除过期的文件和分片。这就是今天本文要讨论的问题。

目录

前言

正文

一段一点问题

删除任务脚本

修改脚本权限

添加自动任务

查看自动任务状态


前言

自研的云存储服务,经常会遇到碎片分片和过期文件的处理问题。最简单的处理方法就是启动一个定时任务定期删除过期的文件和分片。这就是今天本文要讨论的问题。

正文

一段一点问题

启动定时删除任务一般会涉及到三个问题,其中,一个是位置问题,另两个是时间问题。位置问题大家都很好理解,就是要删除哪个目录下的文件。时间问题又可以成为“一段一点”,其中,“一段”就是多久的文件认为过期,换句话说就是哪个时间段内的文件是需要保留的;“一点”就是删除频率,比如每天临晨两点执行删除操作。

删除任务脚本

理解了上面的内容,就什么也不用多说啦。直接看删除任务脚本吧。

脚本内容如下:

#!/bin/bash
# 设置过期天数
EXPIRE_DAY=30
# 设置删除目录
FOLDER=/var/www/html/user-media/files
# 删除
find ${FOLDER} -mtime +${EXPIRE_DAY} -type d | xargs rm -rf
# find /var/www/html/user-media/files -mtime +20 -type d | xargs rm -rf
echo 'success'

将上述脚本保存为 autoDelTask.sh 文件。

注意:EXPIRE_DAY = 30 语句中是不能存在空格的。

修改脚本权限

为了可以执行上面的脚本,接下来需要修改脚本权限,命令如下:

chmod 755 autoDelTask.sh

添加自动任务

好了,最后一步了,我们需要把这个脚本设置成系统的定时任务。

添加自动任务,命令如下:

crontab –e

粘贴下面的命令到文件中:

0 13 * * * /root/work/bag/autoDelTask.sh >> /root/work/bag/autoDelTask.log

有些小伙伴看到上述命令语句可能会蒙圈,不禁会问:都啥呀???

这里稍微解释一下:

前面六个字段分别是分、时、日、月、周、命令。其中,

第1列的 * 号表示分钟1-59 每分钟用*或者 */1表示;

第2列的 * 号表示小时0-23小时(其中,0表示0点);

第3列的 * 号表示日期1-31日;

第4列的 * 号表示月份1-12月;

第5列的 * 号表示每周,0-6(其中,0表示星期天);

第6列表示要运行的命令。

另外,>>  表示保存日志到指定文件中。


通过上面的解释,我们也就理解了刚才粘贴的命令的意思了。是的,上面命令的意思就是每天下午1点开始执行清理任务,保留最近30天的文件。

查看自动任务状态

启动任务后,如果不确定定时任务是否已经生效了,可以使用如下命令查看定时任务的状态:

crontab -l

如果可以看到对应的任务列表,就表示已经设置成功了。

image.png

作者简介:大家好,我是 Data-Mining(liuzhen007),是一位音视频技术爱好者,前后就职于传统广电巨头和音视频互联网公司,具有丰富的音视频直播和点播相关经验,对 WebRTC、FFmpeg 和 Electron 有非常深入的了解。同时也是 CSDN 博客专家、华为云享专家、InfoQ 签约作者,欢迎关注我分享更多干货!


目录
相关文章
|
6天前
|
Linux
在 Linux 系统中,“cd”命令用于切换当前工作目录
在 Linux 系统中,“cd”命令用于切换当前工作目录。本文详细介绍了“cd”命令的基本用法和常见技巧,包括使用“.”、“..”、“~”、绝对路径和相对路径,以及快速切换到上一次工作目录等。此外,还探讨了高级技巧,如使用通配符、结合其他命令、在脚本中使用,以及实际应用案例,帮助读者提高工作效率。
24 3
|
11天前
|
存储 Linux Windows
linux常用目录
/sbin s就是super User的意思,这里存放的是系统管理员使用的系统管理程序。 /home 存放普通用户的主目录,在Linux中每个用户都有一个自己的目录,一版该目录名是以用户的账号命名的。 /root 该目录为系统管理员,也称为超级权限者的用户主目录。 /lib 系统开机所需要最基本的动态连接共享库,其作用类似于windows里的DLL文件。几乎所有的应用程序都需要用到这些共享库。 /etc 所有的系统管理所需要的配置文件和子目录。 /usr 这是一个非常重要的目录,用户的很多应用程序和文件都放在这个目录下,类似于windows下的program fies目录。 /bo
27 2
|
9天前
|
Linux 开发工具 Perl
在Linux中,有一个文件,如何删除包含“www“字样的字符?
在Linux中,如果你想删除一个文件中包含特定字样(如“www”)的所有字符或行,你可以使用多种文本处理工具来实现。以下是一些常见的方法:
34 5
|
9天前
|
安全 Linux 数据安全/隐私保护
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。
在 Linux 系统中,查找文件所有者是系统管理和安全审计的重要技能。本文介绍了使用 `ls -l` 和 `stat` 命令查找文件所有者的基本方法,以及通过文件路径、通配符和结合其他命令的高级技巧。还提供了实际案例分析和注意事项,帮助读者更好地掌握这一操作。
26 6
|
9天前
|
Linux
在 Linux 系统中,`find` 命令是一个强大的文件查找工具
在 Linux 系统中,`find` 命令是一个强大的文件查找工具。本文详细介绍了 `find` 命令的基本语法、常用选项和具体应用示例,帮助用户快速掌握如何根据文件名、类型、大小、修改时间等条件查找文件,并展示了如何结合逻辑运算符、正则表达式和排除特定目录等高级用法。
35 6
|
10天前
|
Linux Python
Linux 中某个目录中的文件数如何查看?这篇教程分分钟教会你!
在 Linux 系统中,了解目录下的文件数量是常见的需求。本文介绍了多种方法,包括使用 `ls` 和 `wc` 命令组合、`find` 命令、`tree` 命令以及编程方式(如 Python)。无论你是新手还是有经验的用户,都能找到适合自己的方法。掌握这些技巧将提高你在 Linux 系统中的操作效率。
22 4
|
10天前
|
监控 Linux Perl
Linux 命令小技巧:显示文件指定行的内容
在 Linux 系统中,处理文本文件是一项常见任务。本文介绍了如何使用 head、tail、sed 和 awk 等命令快速显示文件中的指定行内容,帮助你高效处理文本文件。通过实际应用场景和案例分析,展示了这些命令在代码审查、日志分析和文本处理中的具体用途。同时,还提供了注意事项和技巧,帮助你更好地掌握这些命令。
24 4
|
10天前
|
关系型数据库 MySQL Linux
Linux环境下MySQL数据库自动定时备份实践
数据库备份是确保数据安全的重要措施。在Linux环境下,实现MySQL数据库的自动定时备份可以通过多种方式完成。本文将介绍如何使用`cron`定时任务和`mysqldump`工具来实现MySQL数据库的每日自动备份。
28 3
|
10天前
|
监控 关系型数据库 MySQL
Linux环境下MySQL数据库自动定时备份策略
在Linux环境下,MySQL数据库的自动定时备份是确保数据安全和可靠性的重要措施。通过设置定时任务,我们可以每天自动执行数据库备份,从而减少人为错误和提高数据恢复的效率。本文将详细介绍如何在Linux下实现MySQL数据库的自动定时备份。
24 3
|
15天前
|
网络协议 Linux
linux系统重要文件目录
本文介绍了Linux系统中的重要目录及其历史背景,包括根目录、/usr、/etc、/var/log和/proc等目录的结构和功能。其中,/etc目录下包含了许多关键配置文件,如网卡配置、DNS解析、主机名设置等。文章还详细解释了各目录和文件的作用,帮助读者更好地理解和管理Linux系统。
39 2