自动日志文件轮转

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 【4月更文挑战第30天】

》》》》》魏红斌带你学shell脚本《《《《《


更多shell脚本学习点击个人主页


作为一个资深程序猿,我将带领您从零开始,一步步踏上运维之旅,无论您是否拥有现成的服务器,都将学会如何轻松购买、部署,并通过编写及应用精心设计的Shell脚本,解决实际工作中遇到的问题。这些脚本不仅源自真实的业务场景,经历了反复实践与严格测试,确保了其简洁高效、易于理解且便于使用。更重要的是,我们将全程免费分享,并深度解析背后原理,助您深入理解并灵活运用,每一款脚本均经过真实业务场景的反复打磨与严格测试,秉持着简洁高效、易于理解和使用的理念设计,无偿提供并且提供相关解析过程,让读者能更深入了解相关内容

无服务器的朋友们

让我们先从选购并部署服务器开始。只需简单三步,即可拥有您的专属云服务器:

  1. 访问ECS官网:点击链接直达阿里云ECS网站:ECS选择网址。这是您获取高质量云服务器的第一站。
  2. 选择并购买:在琳琅满目的服务器配置中,挑选符合您需求的那一款,一键下单,完成支付。整个过程犹如在线购物般便捷。
  3. 进入ECS控制台:支付成功后,您将被引导至ECS管理控制台。在这里,您可以全面掌控您的服务器资源,后续的所有运维操作都将在此展开。

已有服务器的朋友们

如果您已拥有ECS实例,那么请直接登录ECS管理控制台在左侧导航栏中,依次选择“实例与镜像” > “实例”,确保您已定位到目标资源所在的资源组和地域。接下来,在实例列表中找到待连接的实例,点击操作列下的“远程连接”,选择“通过Workbench远程连接”并点击“立即登录”。

登录实例

无论是新购还是已有服务器,接下来都需要进行实例登录。这里支持多种认证方式,以最常见的“密码认证”为例:

  • 输入用户名(通常为rootecs-user)。
  • 接着,输入登录密码。如果您忘记了密码,无需担忧,您可以在ECS实例详情页面查询,或者通过“更改密码”功能进行修改。

编写与运行Shell脚本

成功登录后,您将看到一个熟悉的命令行界面——这就是您的运维主战场。现在,键入vim test.sh,我们便进入了文本编辑模式,准备创建第一个Shell脚本。

按下键盘上的i键,进入插入模式,此刻您可以自由地复制粘贴今天要学习的脚本代码,粘贴后按ecs后,按:wq保存脚本,可以用./ test.sh或者sh test.sh进行脚本执行。

今天我们要学习的脚本是(脚本内容直接复制粘贴即可):

#!/bin/bash
# 日志文件轮转脚本
# 设置日志文件目录和文件名
LOG_DIR="/var/log"
LOG_FILE="application.log"
# 设置轮转后文件的压缩格式
ARCHIVE_FORMAT=".gz"
# 设置轮转后文件的最大数量
MAX_ARCHIVES=5
# 检查日志文件是否存在
if [ ! -f "$LOG_DIR/$LOG_FILE" ]; then
    echo "日志文件 $LOG_DIR/$LOG_FILE 不存在,请先创建。"
    exit 1
fi
# 获取当前日志文件的最后修改时间
LAST_MODIFIED=$(stat -c %Y "$LOG_DIR/$LOG_FILE")
# 获取当前时间的时间戳
CURRENT_TIME=$(date +%s)
# 计算日志文件的年龄(以秒为单位)
AGE=$((CURRENT_TIME - LAST_MODIFIED))
# 设置日志文件轮转的阈值(例如:24小时)
THRESHOLD=86400
# 如果日志文件年龄超过阈值,则执行轮转
if [ $AGE -gt $THRESHOLD ]; then
    echo "日志文件 $LOG_DIR/$LOG_FILE 年龄超过 $THRESHOLD 秒,开始轮转..."
    # 创建一个新的日志文件
    cp "$LOG_DIR/$LOG_FILE" "$LOG_DIR/$LOG_FILE.old"
    touch "$LOG_DIR/$LOG_FILE"
    # 压缩旧的日志文件
    gzip "$LOG_DIR/$LOG_FILE.old"
    # 获取轮转后的文件列表
    ARCHIVES=$(ls -t "$LOG_DIR/$LOG_FILE"*"$ARCHIVE_FORMAT" 2>/dev/null)
    # 如果轮转后的文件数量超过最大数量,则删除最旧的文件
    if [ $(echo "$ARCHIVES" | wc -l) -gt $MAX_ARCHIVES ]; then
        oldest_archive=$(echo "$ARCHIVES" | head -n 1)
        echo "删除最旧的轮转文件: $oldest_archive"
        rm "$oldest_archive"
    fi
    echo "日志文件轮转完成。"
else
    echo "日志文件 $LOG_DIR/$LOG_FILE 年龄未超过阈值,无需轮转。"
fi
# 脚本结束

逐行解析步骤:

  1. #!/bin/bash:指定脚本使用bash shell执行。

2-4. 注释部分:提供脚本的概括标题和描述。

6-7. 设置日志文件的目录和文件名。

  1. 设置轮转后文件的压缩格式。
  2. 设置轮转后文件的最大数量。

13-16. 检查日志文件是否存在,如果不存在则输出错误信息并退出脚本。

18-21. 获取日志文件的最后修改时间,并计算其年龄。

  1. 设置日志文件轮转的阈值,这里以24小时为例。

25-27. 如果日志文件的年龄超过阈值,则执行轮转。

28-30. 创建一个新的日志文件,并备份旧的日志文件。

  1. 压缩旧的日志文件。

34-38. 获取轮转后的文件列表,并检查是否超过最大数量。如果超过,则删除最旧的文件。

  1. 输出轮转完成的消息。

42-44. 如果日志文件的年龄未超过阈值,则输出无需轮转的消息。

  1. 脚本结束。

总结:

这个脚本是一个日志文件轮转脚本,用于自动管理日志文件的生命周期。它首先检查指定的日志文件是否存在,并计算其年龄。如果年龄超过预设的阈值(例如24小时),则执行轮转操作,包括创建新的日志文件、备份并压缩旧的日志文件。此外,脚本还会检查轮转后的文件数量,如果超过预设的最大数量,则删除最旧的轮转文件。这个脚本对于需要定期管理和压缩日志文件的环境非常有用,可以节省存储空间并保持日志文件的整洁性。

如果想上手操作练代码的同学们可以通过阿里云ecs服务器免费试用参与!

入口:新老同学免费试用

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
3月前
|
Java Apache 开发工具
【Azure 事件中心】 org.slf4j.Logger 收集 Event Hub SDK(Java) 输出日志并以文件形式保存
【Azure 事件中心】 org.slf4j.Logger 收集 Event Hub SDK(Java) 输出日志并以文件形式保存
|
11天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
119 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
11天前
|
SQL Oracle 关系型数据库
【赵渝强老师】Oracle的控制文件与归档日志文件
本文介绍了Oracle数据库中的控制文件和归档日志文件。控制文件记录了数据库的物理结构信息,如数据库名、数据文件和联机日志文件的位置等。为了保护数据库,通常会进行控制文件的多路复用。归档日志文件是联机重做日志文件的副本,用于记录数据库的变更历史。文章还提供了相关SQL语句,帮助查看和设置数据库的日志模式。
【赵渝强老师】Oracle的控制文件与归档日志文件
|
9天前
|
Windows Python
如何反向读取Windows系统日志EVTX文件?
以下是如何反向读取Windows系统日志EVTX文件
21 2
|
11天前
|
Oracle 关系型数据库 数据库
【赵渝强老师】Oracle的参数文件与告警日志文件
本文介绍了Oracle数据库的参数文件和告警日志文件。参数文件分为初始化参数文件(PFile)和服务器端参数文件(SPFile),在数据库启动时读取并分配资源。告警日志文件记录了数据库的重要活动、错误和警告信息,帮助诊断问题。文中还提供了相关视频讲解和示例代码。
|
1月前
|
监控 Linux 应用服务中间件
系统监控:使用日志文件 journalctl的使用
本文介绍了如何使用`journalctl`命令来监控和查看Linux系统的日志文件,包括查看特定行数、过滤日志级别、实时跟踪日志、按时间段查询日志以及日志轮换和压缩的配置。
46 2
系统监控:使用日志文件 journalctl的使用
|
1月前
|
SQL 数据库
为什么 SQL 日志文件很大,我应该如何处理?
为什么 SQL 日志文件很大,我应该如何处理?
|
1月前
|
开发工具 git
git显示开发日志+WinSW——将.exe文件注册为服务的一个工具+图床PicGo+kubeconfig 多个集群配置 如何切换
git显示开发日志+WinSW——将.exe文件注册为服务的一个工具+图床PicGo+kubeconfig 多个集群配置 如何切换
39 1
|
1月前
|
存储 监控 固态存储
如何监控和优化 WAL 日志文件的存储空间使用?
如何监控和优化 WAL 日志文件的存储空间使用?
|
1月前
|
SQL 数据库
为什么SQL日志文件很大,该如何处理?
为什么SQL日志文件很大,该如何处理?
下一篇
无影云桌面