AWStats: Apache/IIS的日志分析工具

简介:

awstats是一款WEB日志的分析工具,同时也可以分析FTP等应用的日志,它在Sourceforge上发展很快的一个基于Perl的WEB日志分析工具。相对于另外一个非常优秀的开放源代码的日志分析工具Webalizer,AWStats的优势在于:界面友好:可以根据浏览器直接调用相应语言界面(有简体中文版)基于Perl:并且很好的解决了跨平台问题,系统本身可以运行在GNU/Linux上或Windows上(安装了ActivePerl后);分析的日志直接支持Apache格式 (combined)和IIS格式(需要修改)。Webalizer虽然也有Windows平台版,但目前已经缺乏维护; AWStats完全可以实现用一套系统完成对自身站点不同WEB服务器:GNU/Linux/Apache和Windows/IIS服务器的统一统计。 效率比较高:AWStats输出统计项目比Webalizer丰富了很多,速度仍可以达到Webalizer的1/3左右,对于一个日访问量百万级的站点,这个速度都是足够的;配置/定制方便:系统提供了足够灵活但缺省也很合理的配置规则,需要修改的缺省配置不超过3,4项就可以开始运行,而且修改和扩展的插件还是比较多的; AWStats的设计者是面向精确的"Human visits"设计的,因此很多搜索引擎的机器人访问都被过滤掉了,因此有可能比其他日志统计工具统计的数字要低,来自公司内部的访问也可以通过IP过滤设置过滤掉。 提供了很多扩展的参数统计功能:使用ExtraXXXX系列配置生成针对具体应用的参数分析会对产品分析非常有用。 下面介绍我的具体安装过程:我操作系统环境: REDHAT LINUX AS3+httpd-2.0.46+php-4.3.2+perl-5.8.0 首先从http://sourceforge.net/projects/awstats/ 下载安装包,我下了最新的稳定版本awstats 6.4(现在已经有6.5了,但是还是测试版本,所以不用)。 tar zxvf awstats-6.4 cd awstats-6.4 mv wwwroot/cgi-bin /var/www/cgi-bin/awstats(网站的CGI目录) #wwwroot/cgi-bin下都是一些主配置文件和主程序awstats.pl mv wwwroot/icon /var/www/icons #把图标拷贝到网站的图标目录下然后设置APACHE的日志格式,这里需要用到cronolog工具(到http://www.cronolog.org/下载),下载过来解压缩后只要进行./configure和make就可以完成安装了安装好cronalog后将httpd.conf中的CustomLog改成如下 CustomLog "|/usr/local/sbin/cronolog /path/to/apache/logs/access_log.%Y%m%d" combined 这个格式的日志名如logs/access_log.20050614 接着需要把/var/www/cgi-bin/awstats下的awstats.model.conf重命名 cd /var/www/cgi-bin/awstats mv awstats.model.conf awstats.yourname.conf 修改配置文件 vi awstats.yourname.conf 修改以下几个参数 LogFile="/your website path/logs/access_log.%YYYY-24%MM-24%DD-24" SiteDomain="www.yourname.com" 站点的名称,缺省是空的,如果为空,AWStats将拒绝运行;配置的最简单修改就是这样了,就可以运行了,如果还需要做其他一些功能设置只要修改一些相关项就可以了,具体就查看配置文件里的注释部分,讲得很清楚的。然后就是做日志分析了 ./awstats.pl -update -config=yourname -lang=cn 比如:./awstats.pl -update -config=yourname 会自动调用awstats.yourname.conf这个配置文件这个时候在浏览器里输入http://localhost/cgi-bin/awstats/awstats.pl?config=yourname就能看到日志分析后出来的WEB页面了。设置awstats每天自动运行一次,更新日志分析数据 crontab -e: 每天8点10分运行 #update awstats 10 8 * * * (cd /var/www/cgi-bin/awstats/; ./awstats.pl -update -config=yourname) awstats还可以对多站点日志统计 AWStats自带了一个批处理工具:tools/awstats_updateall.pl,可以批量地遍历一个目录下所有地配置文件并运行统计。因此剩下的工作就主要是日志的同步问题了。针对多个站点,很多配置选项是重复的,如果每个配置文件都修改维护起来会很麻烦,AWStats从5.4版本开始提供了配置文件包含的功能,所以我们可以配置一个通用配置,比如:common.conf 然后其他站点的配置设置为:可以通过后面的选项覆盖和缺省不一致的配置。 awstats.bbs.yourname.conf Include "yourname.common.conf" LogFile "/path/to/bbs_log" SiteName "bbs.yourname.com" awstats.www.yourname.conf Include "yourname.common.conf" LogFile "/path/to/www_log" SiteName "www.yourname.com" HostAliases="yourname.com" 这样,一个WEB的日志分析就搞定了,配置文件里还有许多参数选项我都还没做仔细了解,等了解了再说吧,呵呵



本文转自 firehare 51CTO博客,原文链接:http://blog.51cto.com/firehare/588213,如需转载请自行联系原作者

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
3月前
|
存储 Prometheus 监控
Prometheus vs. ELK Stack:容器监控与日志管理工具的较量
随着容器化技术的广泛应用,容器监控与日志管理成为了关键任务。本文将对两种常用工具进行比较与选择,分别是Prometheus和ELK Stack。Prometheus是一款开源的监控系统,专注于时序数据的收集和告警。而ELK Stack则是一套完整的日志管理解决方案,由Elasticsearch、Logstash和Kibana三个组件组成。通过比较它们的特点、优势和适用场景,读者可以更好地了解如何选择适合自己需求的工具。
|
4月前
|
存储 算法 数据挖掘
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(2)
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(2)
101 1
|
4月前
|
存储 安全 数据挖掘
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(1)
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(1)
|
5天前
工具变量法(两阶段最小二乘法2SLS)线性模型分析人均食品消费时间序列数据和回归诊断2
工具变量法(两阶段最小二乘法2SLS)线性模型分析人均食品消费时间序列数据和回归诊断
10 0
|
5天前
|
机器学习/深度学习 前端开发 数据挖掘
R语言计量经济学:工具变量法(两阶段最小二乘法2SLS)线性模型分析人均食品消费时间序列数据和回归诊断
R语言计量经济学:工具变量法(两阶段最小二乘法2SLS)线性模型分析人均食品消费时间序列数据和回归诊断
37 0
|
1月前
|
监控 测试技术 Linux
性能工具之 Apache Bench 入门使用
ab 全称为:apache bench,ab 为小型压力工具,对于在 Linux 中简单压测 HTTP 接口轻巧灵活。
23 1
|
1月前
|
存储 分布式计算 Hadoop
一文了解Apache Hudi架构、工具和最佳实践
一文了解Apache Hudi架构、工具和最佳实践
82 0
|
1月前
|
存储 消息中间件 监控
Zoom 基于Apache Hudi 的流式日志处理实践
Zoom 基于Apache Hudi 的流式日志处理实践
44 1
|
3月前
|
Prometheus 监控 Cloud Native
Prometheus VS ELK Stack:容器监控与日志管理工具的比较与选择
在容器化时代,有效的容器监控与日志管理工具对于确保应用程序的可靠性和可维护性至关重要。本文将比较两个主流工具,Prometheus和ELK Stack,探讨它们在容器监控和日志管理方面的特点、优势和适用场景,帮助读者做出明智的选择。
|
3月前
|
存储 监控 Ubuntu
日志切割工具-Logrotate实现nginx日志切割
日志切割工具-Logrotate实现nginx日志切割
37 0

热门文章

最新文章

推荐镜像

更多