Apache 访问日志管理

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

访问日志不记录静态文件

网站大多元素为静态文件,如图片、css、js等,这些元素可以不用记录到访问日志中。

  • 编辑httpd虚拟主机配置文件“httpd-vhosts.conf”

    [root@localhost ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf 
    ......
    <VirtualHost :80>
    ServerAdmin webmaster@dummy-host2.example.com
    DocumentRoot "/usr/local/apache2.4/docs/dummy-host2.example.com"
    ServerName dummy-host2.example.com
    ErrorLog "logs/dummy-host2.example.com-error_log"
    添加下面这几行代码:
    SetEnvIf Request_URI ".
    .gif$" img
    SetEnvIf Request_URI "..jpg$" img 
    SetEnvIf Request_URI ".
    .png$" img
    SetEnvIf Request_URI "..bmp$" img
    SetEnvIf Request_URI ".
    .swf$" img
    SetEnvIf Request_URI "..js$" img
    SetEnvIf Request_URI ".
    .css$" img
    #以上为定义变量:将所有关于图片的请求定义为变量img 
    CustomLog "logs/dummy-host2.example.com-access_log" combined env=!img

    在combined 后添加env=!img

    </VirtualHost>

  • 检测并加载配置文件

    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl -t
    Syntax OK
    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl graceful

    重新加载后使用curl访问img变量中所指定格式的文件内容时将不会产生访问记录。

测试结果:使用curl访问png等格式文件时日志不会记录访问信息。访问其它格式仍然会记录访问信息。使用浏览器访问亦如此。

访问日志切割

日志一直记录总有一天会把整个磁盘占满,所以有必要让它自动切割,并删除老的日志文件。

  • 修改httpd虚拟主机配置文件

    [root@localhost ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
    ……
    <VirtualHost *:80>
    .....
    按下面修改日志文件路径:
    CustomLog "|/usr/local/apache2.4/bin/rotatelogs -l logs/111.com-access%Y%m%d.log 86400" combined env=!img
    #使用rotatelogs工具,以系统时间为基准,每天切割一次日志,并且日志名字格式为“111.com-access
    %Y%m%d.log”。

    #86400为一天的秒数,如果是一小时切割一次就是3600.

说明: rotatelogs是Apache切割日志的工具;-l表示使用系统(CST=Chinese time)时间,如果不加-l选项,将以默认的(UTC)时间为准;日志文件名“%Y%m%d”表示年月日;时间间隔设定为一天(1day=24h=1440min=86400s)。

  • 检测并重新加载配置文件.

    [root@localhost 111.com]# /usr/local/apache2.4/bin/apachectl -t
    Syntax OK
    [root@localhost 111.com]# /usr/local/apache2.4/bin/apachectl graceful

  • 测试

    访问:
    [root@localhost ~]# curl -x192.168.8.131:80 111.com/http.jpg -I
    查看日志:
    [root@localhost 111.com]# ls /usr/local/apache2.4/logs/
    111.com-access_20170801.log 111.com-error_log abc.com-error_log error_log
    111.com-access_log abc.com-access_log access_log httpd.pid

注意:需要配合计划任务使用,定期清理日志文件,避免日志文件累计导致磁盘空间不足。

静态元素过期时间

当浏览器访问网站时会把静态文件(如图片文件、css、js文件等)缓存到本地电脑,这样下次访问的时候就不用去远程下载了,可以自定义清除该部分缓存的时间,即设定静态元素过期时间。该设置可用于优化网站,特别是公司内网。

  • 编辑虚拟主机配置文件

    增加expires模块。

    [root@localhost ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
    添加expires模块:
    ......
    <IfModdule mod_expires.c>
    ExpiresActive on
    #打开该功能的开关 
    ExpiresByType image/gif "access plus 1 days"
    ExpiresByType image/jpeg "access plus 24 hours"
    ExpiresByType image/png "access plus 24 hours"
    ExpiresByType text/css "now plus 2 hours" ExpiresByType application/x-javascript "now plus 2 hours"
    ExpiresByType application/javascript "now plus 2 hours"
    ExpiresByType application/x-shockwave-flash "now plus 2 hours"
    ExpiresDefault "now plus 0 min"
    #以上是定义不同类型的文件缓存的时间
    </IfModule>
    ......

  • 检测apache是否加载了expires模块

    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl -M | grep expires

如果没有加载模块则需要修改apache主配置文件httpd.cnf

[root@localhost ~]# vim /usr/local/apache2.4/conf/httpd.conf
......
LoadModule expires_module modules/mod_expires.so
......

取消expires这行的注释即可。

  • 检测并重载配置文件

    检测expires模块是否开启:
    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl -M | grep expires
    expires_module (shared)
    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl -t
    Syntax OK
    [root@localhost ~]# /usr/local/apache2.4/bin/apachectl graceful

  • 测试

    访问uu.com下的1.png

    [root@localhost ~]# curl -x192.168.159.128:80 uu.com/1.png -I
    HTTP/1.1 200 OK
    Date: Thu, 21 Dec 2017 07:19:39 GMT
    Server: Apache/2.4.29 (Unix) PHP/7.1.6
    Last-Modified: Thu, 21 Dec 2017 05:51:30 GMT
    ETag: "182ab-560d34aad6f28"
    Accept-Ranges: bytes
    Content-Length: 98987
    Cache-Control: max-age=86400
    Expires: Fri, 22 Dec 2017 07:19:39 GMT
    Content-Type: image/png

当前时间“Date: Thu, 21 Dec 2017 07:19:39 GMT”,缓存时长“Cache-Control: max-age=86400s”,失效时间“Expires: Fri, 22 Dec 2017 07:19:39 GMT GMT”,即png格式图片缓存时长为1天。




本文转自 豆渣锅 51CTO博客,原文链接:

http://blog.51cto.com/754599082/2053092
相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
2月前
|
存储 运维 监控
金融场景 PB 级大规模日志平台:中信银行信用卡中心从 Elasticsearch 到 Apache Doris 的先进实践
中信银行信用卡中心每日新增日志数据 140 亿条(80TB),全量归档日志量超 40PB,早期基于 Elasticsearch 构建的日志云平台,面临存储成本高、实时写入性能差、文本检索慢以及日志分析能力不足等问题。因此使用 Apache Doris 替换 Elasticsearch,实现资源投入降低 50%、查询速度提升 2~4 倍,同时显著提高了运维效率。
金融场景 PB 级大规模日志平台:中信银行信用卡中心从 Elasticsearch 到 Apache Doris 的先进实践
|
2月前
|
存储 监控 安全
实时记录和查看Apache 日志
Apache 是一个开源、跨平台的 Web 服务器,保护其平台需监控活动和事件。Apache 日志分为访问日志和错误日志,分别记录用户请求和服务器错误信息。EventLog Analyzer 是一款强大的日志查看工具,提供集中收集、分析、实时警报和安全监控功能,帮助管理员识别趋势、检测威胁并确保合规性。通过直观的仪表板和自动化响应,它简化了大规模日志管理,增强了 Apache 服务器的安全性和性能。
|
3月前
|
存储 监控 安全
实时记录和查看Apache 日志
Apache 是一个开源、跨平台的Web服务器,保护其安全依赖于监控活动和分析访问日志。日志分为访问日志和错误日志,前者记录用户请求及响应情况,后者记录服务器错误信息。EventLog Analyzer等工具可集中收集、分析日志,提供直观的仪表板和实时警报,帮助识别趋势、异常和威胁,确保服务器稳定性和安全性,并支持合规管理。
|
3月前
|
监控 安全 Apache
什么是Apache日志?为什么Apache日志分析很重要?
Apache是全球广泛使用的Web服务器软件,支持超过30%的活跃网站。它通过接收和处理HTTP请求,与后端服务器通信,返回响应并记录日志,确保网页请求的快速准确处理。Apache日志分为访问日志和错误日志,对提升用户体验、保障安全及优化性能至关重要。EventLog Analyzer等工具可有效管理和分析这些日志,增强Web服务的安全性和可靠性。
|
3月前
|
监控 应用服务中间件 定位技术
要统计Nginx的客户端IP,可以通过分析Nginx的访问日志文件来实现
要统计Nginx的客户端IP,可以通过分析Nginx的访问日志文件来实现
265 3
|
6月前
|
设计模式 SQL 安全
PHP中的设计模式:单例模式的深入探索与实践在PHP的编程实践中,设计模式是解决常见软件设计问题的最佳实践。单例模式作为设计模式中的一种,确保一个类只有一个实例,并提供全局访问点,广泛应用于配置管理、日志记录和测试框架等场景。本文将深入探讨单例模式的原理、实现方式及其在PHP中的应用,帮助开发者更好地理解和运用这一设计模式。
在PHP开发中,单例模式通过确保类仅有一个实例并提供一个全局访问点,有效管理和访问共享资源。本文详细介绍了单例模式的概念、PHP实现方式及应用场景,并通过具体代码示例展示如何在PHP中实现单例模式以及如何在实际项目中正确使用它来优化代码结构和性能。
79 2
|
7月前
|
存储 消息中间件 Java
Apache Flink 实践问题之原生TM UI日志问题如何解决
Apache Flink 实践问题之原生TM UI日志问题如何解决
66 1
|
7月前
|
网络安全
【Azure Service Bus】启用诊断日志来获取客户端访问Azure Service Bus的IP地址 [2024-03-26 实验结果失败]
【Azure Service Bus】启用诊断日志来获取客户端访问Azure Service Bus的IP地址 [2024-03-26 实验结果失败]
|
7月前
|
消息中间件 Java Kafka
【Azure 事件中心】开启 Apache Flink 制造者 Producer 示例代码中的日志输出 (连接 Azure Event Hub Kafka 终结点)
【Azure 事件中心】开启 Apache Flink 制造者 Producer 示例代码中的日志输出 (连接 Azure Event Hub Kafka 终结点)
|
7月前
|
Ubuntu Linux 测试技术
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?
在Linux中,已知 apache 服务的访问日志按天记录在服务器本地目录/app/logs 下,由于磁盘空间紧张现在要求只能保留最近7天的访问日志,请问如何解决?

推荐镜像

更多