AWStats: Apache/IIS的日志分析工具

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

awstats是一款WEB日志的分析工具,同时也可以分析FTP等应用的日志,它在Sourceforge上发展很快的一个基于Perl的WEB日志分析工具。相对于另外一个非常优秀的开放源代码的日志分析工具Webalizer,AWStats的优势在于:界面友好:可以根据浏览器直接调用相应语言界面(有简体中文版)基于Perl:并且很好的解决了跨平台问题,系统本身可以运行在GNU/Linux上或Windows上(安装了ActivePerl后);分析的日志直接支持Apache格式 (combined)和IIS格式(需要修改)。Webalizer虽然也有Windows平台版,但目前已经缺乏维护; AWStats完全可以实现用一套系统完成对自身站点不同WEB服务器:GNU/Linux/Apache和Windows/IIS服务器的统一统计。 效率比较高:AWStats输出统计项目比Webalizer丰富了很多,速度仍可以达到Webalizer的1/3左右,对于一个日访问量百万级的站点,这个速度都是足够的;配置/定制方便:系统提供了足够灵活但缺省也很合理的配置规则,需要修改的缺省配置不超过3,4项就可以开始运行,而且修改和扩展的插件还是比较多的; AWStats的设计者是面向精确的"Human visits"设计的,因此很多搜索引擎的机器人访问都被过滤掉了,因此有可能比其他日志统计工具统计的数字要低,来自公司内部的访问也可以通过IP过滤设置过滤掉。 提供了很多扩展的参数统计功能:使用ExtraXXXX系列配置生成针对具体应用的参数分析会对产品分析非常有用。 下面介绍我的具体安装过程:我操作系统环境: REDHAT LINUX AS3+httpd-2.0.46+php-4.3.2+perl-5.8.0 首先从http://sourceforge.net/projects/awstats/ 下载安装包,我下了最新的稳定版本awstats 6.4(现在已经有6.5了,但是还是测试版本,所以不用)。 tar zxvf awstats-6.4 cd awstats-6.4 mv wwwroot/cgi-bin /var/www/cgi-bin/awstats(网站的CGI目录) #wwwroot/cgi-bin下都是一些主配置文件和主程序awstats.pl mv wwwroot/icon /var/www/icons #把图标拷贝到网站的图标目录下然后设置APACHE的日志格式,这里需要用到cronolog工具(到http://www.cronolog.org/下载),下载过来解压缩后只要进行./configure和make就可以完成安装了安装好cronalog后将httpd.conf中的CustomLog改成如下 CustomLog "|/usr/local/sbin/cronolog /path/to/apache/logs/access_log.%Y%m%d" combined 这个格式的日志名如logs/access_log.20050614 接着需要把/var/www/cgi-bin/awstats下的awstats.model.conf重命名 cd /var/www/cgi-bin/awstats mv awstats.model.conf awstats.yourname.conf 修改配置文件 vi awstats.yourname.conf 修改以下几个参数 LogFile="/your website path/logs/access_log.%YYYY-24%MM-24%DD-24" SiteDomain="www.yourname.com" 站点的名称,缺省是空的,如果为空,AWStats将拒绝运行;配置的最简单修改就是这样了,就可以运行了,如果还需要做其他一些功能设置只要修改一些相关项就可以了,具体就查看配置文件里的注释部分,讲得很清楚的。然后就是做日志分析了 ./awstats.pl -update -config=yourname -lang=cn 比如:./awstats.pl -update -config=yourname 会自动调用awstats.yourname.conf这个配置文件这个时候在浏览器里输入http://localhost/cgi-bin/awstats/awstats.pl?config=yourname就能看到日志分析后出来的WEB页面了。设置awstats每天自动运行一次,更新日志分析数据 crontab -e: 每天8点10分运行 #update awstats 10 8 * * * (cd /var/www/cgi-bin/awstats/; ./awstats.pl -update -config=yourname) awstats还可以对多站点日志统计 AWStats自带了一个批处理工具:tools/awstats_updateall.pl,可以批量地遍历一个目录下所有地配置文件并运行统计。因此剩下的工作就主要是日志的同步问题了。针对多个站点,很多配置选项是重复的,如果每个配置文件都修改维护起来会很麻烦,AWStats从5.4版本开始提供了配置文件包含的功能,所以我们可以配置一个通用配置,比如:common.conf 然后其他站点的配置设置为:可以通过后面的选项覆盖和缺省不一致的配置。 awstats.bbs.yourname.conf Include "yourname.common.conf" LogFile "/path/to/bbs_log" SiteName "bbs.yourname.com" awstats.www.yourname.conf Include "yourname.common.conf" LogFile "/path/to/www_log" SiteName "www.yourname.com" HostAliases="yourname.com" 这样,一个WEB的日志分析就搞定了,配置文件里还有许多参数选项我都还没做仔细了解,等了解了再说吧,呵呵



本文转自 firehare 51CTO博客,原文链接:http://blog.51cto.com/firehare/588213,如需转载请自行联系原作者

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
1月前
|
存储 人工智能 JSON
RAG Logger:专为检索增强生成(RAG)应用设计的开源日志工具,支持查询跟踪、性能监控
RAG Logger 是一款专为检索增强生成(RAG)应用设计的开源日志工具,支持查询跟踪、检索结果记录、LLM 交互记录和性能监控等功能。
75 7
RAG Logger:专为检索增强生成(RAG)应用设计的开源日志工具,支持查询跟踪、性能监控
|
3月前
|
前端开发 数据处理 Android开发
Flutter前端开发中的调试技巧与工具使用方法,涵盖调试的重要性、基本技巧如打印日志与断点调试、常用调试工具如Android Studio/VS Code调试器和Flutter Inspector的介绍
本文深入探讨了Flutter前端开发中的调试技巧与工具使用方法,涵盖调试的重要性、基本技巧如打印日志与断点调试、常用调试工具如Android Studio/VS Code调试器和Flutter Inspector的介绍,以及具体操作步骤、常见问题解决、高级调试技巧、团队协作中的调试应用和未来发展趋势,旨在帮助开发者提高调试效率,提升应用质量。
89 8
|
3月前
|
监控 安全 网络安全
使用EventLog Analyzer日志分析工具监测 Windows Server 安全威胁
Windows服务器面临多重威胁,包括勒索软件、DoS攻击、内部威胁、恶意软件感染、网络钓鱼、暴力破解、漏洞利用、Web应用攻击及配置错误等。这些威胁严重威胁服务器安全与业务连续性。EventLog Analyzer通过日志管理和威胁分析,有效检测并应对上述威胁,提升服务器安全性,确保服务稳定运行。
|
3月前
|
运维 Prometheus 监控
特定用途的日志分析工具
【10月更文挑战第20天】
96 5
|
3月前
|
存储 机器学习/深度学习 传感器
商业日志分析工具
【10月更文挑战第20天】
83 5
|
3月前
|
存储 运维 监控
开源日志分析工具
【10月更文挑战第20天】
236 3
|
4月前
|
开发工具 git
git显示开发日志+WinSW——将.exe文件注册为服务的一个工具+图床PicGo+kubeconfig 多个集群配置 如何切换
git显示开发日志+WinSW——将.exe文件注册为服务的一个工具+图床PicGo+kubeconfig 多个集群配置 如何切换
62 1
|
12天前
|
存储 SQL 关系型数据库
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log、原理、写入过程;binlog与redolog区别、update语句的执行流程、两阶段提交、主从复制、三种日志的使用场景;查询日志、慢查询日志、错误日志等其他几类日志
MySQL日志详解——日志分类、二进制日志bin log、回滚日志undo log、重做日志redo log
|
1月前
|
SQL 关系型数据库 MySQL
MySQL事务日志-Undo Log工作原理分析
事务的持久性是交由Redo Log来保证,原子性则是交由Undo Log来保证。如果事务中的SQL执行到一半出现错误,需要把前面已经执行过的SQL撤销以达到原子性的目的,这个过程也叫做"回滚",所以Undo Log也叫回滚日志。
MySQL事务日志-Undo Log工作原理分析
|
2月前
|
监控 安全 Apache
什么是Apache日志?为什么Apache日志分析很重要?
Apache是全球广泛使用的Web服务器软件,支持超过30%的活跃网站。它通过接收和处理HTTP请求,与后端服务器通信,返回响应并记录日志,确保网页请求的快速准确处理。Apache日志分为访问日志和错误日志,对提升用户体验、保障安全及优化性能至关重要。EventLog Analyzer等工具可有效管理和分析这些日志,增强Web服务的安全性和可靠性。

推荐镜像

更多