AWStats: Apache/IIS的日志分析工具

简介:

awstats是一款WEB日志的分析工具,同时也可以分析FTP等应用的日志,它在Sourceforge上发展很快的一个基于Perl的WEB日志分析工具。相对于另外一个非常优秀的开放源代码的日志分析工具Webalizer,AWStats的优势在于:界面友好:可以根据浏览器直接调用相应语言界面(有简体中文版)基于Perl:并且很好的解决了跨平台问题,系统本身可以运行在GNU/Linux上或Windows上(安装了ActivePerl后);分析的日志直接支持Apache格式 (combined)和IIS格式(需要修改)。Webalizer虽然也有Windows平台版,但目前已经缺乏维护; AWStats完全可以实现用一套系统完成对自身站点不同WEB服务器:GNU/Linux/Apache和Windows/IIS服务器的统一统计。 效率比较高:AWStats输出统计项目比Webalizer丰富了很多,速度仍可以达到Webalizer的1/3左右,对于一个日访问量百万级的站点,这个速度都是足够的;配置/定制方便:系统提供了足够灵活但缺省也很合理的配置规则,需要修改的缺省配置不超过3,4项就可以开始运行,而且修改和扩展的插件还是比较多的; AWStats的设计者是面向精确的"Human visits"设计的,因此很多搜索引擎的机器人访问都被过滤掉了,因此有可能比其他日志统计工具统计的数字要低,来自公司内部的访问也可以通过IP过滤设置过滤掉。 提供了很多扩展的参数统计功能:使用ExtraXXXX系列配置生成针对具体应用的参数分析会对产品分析非常有用。 下面介绍我的具体安装过程:我操作系统环境: REDHAT LINUX AS3+httpd-2.0.46+php-4.3.2+perl-5.8.0 首先从http://sourceforge.net/projects/awstats/ 下载安装包,我下了最新的稳定版本awstats 6.4(现在已经有6.5了,但是还是测试版本,所以不用)。 tar zxvf awstats-6.4 cd awstats-6.4 mv wwwroot/cgi-bin /var/www/cgi-bin/awstats(网站的CGI目录) #wwwroot/cgi-bin下都是一些主配置文件和主程序awstats.pl mv wwwroot/icon /var/www/icons #把图标拷贝到网站的图标目录下然后设置APACHE的日志格式,这里需要用到cronolog工具(到http://www.cronolog.org/下载),下载过来解压缩后只要进行./configure和make就可以完成安装了安装好cronalog后将httpd.conf中的CustomLog改成如下 CustomLog "|/usr/local/sbin/cronolog /path/to/apache/logs/access_log.%Y%m%d" combined 这个格式的日志名如logs/access_log.20050614 接着需要把/var/www/cgi-bin/awstats下的awstats.model.conf重命名 cd /var/www/cgi-bin/awstats mv awstats.model.conf awstats.yourname.conf 修改配置文件 vi awstats.yourname.conf 修改以下几个参数 LogFile="/your website path/logs/access_log.%YYYY-24%MM-24%DD-24" SiteDomain="www.yourname.com" 站点的名称,缺省是空的,如果为空,AWStats将拒绝运行;配置的最简单修改就是这样了,就可以运行了,如果还需要做其他一些功能设置只要修改一些相关项就可以了,具体就查看配置文件里的注释部分,讲得很清楚的。然后就是做日志分析了 ./awstats.pl -update -config=yourname -lang=cn 比如:./awstats.pl -update -config=yourname 会自动调用awstats.yourname.conf这个配置文件这个时候在浏览器里输入http://localhost/cgi-bin/awstats/awstats.pl?config=yourname就能看到日志分析后出来的WEB页面了。设置awstats每天自动运行一次,更新日志分析数据 crontab -e: 每天8点10分运行 #update awstats 10 8 * * * (cd /var/www/cgi-bin/awstats/; ./awstats.pl -update -config=yourname) awstats还可以对多站点日志统计 AWStats自带了一个批处理工具:tools/awstats_updateall.pl,可以批量地遍历一个目录下所有地配置文件并运行统计。因此剩下的工作就主要是日志的同步问题了。针对多个站点,很多配置选项是重复的,如果每个配置文件都修改维护起来会很麻烦,AWStats从5.4版本开始提供了配置文件包含的功能,所以我们可以配置一个通用配置,比如:common.conf 然后其他站点的配置设置为:可以通过后面的选项覆盖和缺省不一致的配置。 awstats.bbs.yourname.conf Include "yourname.common.conf" LogFile "/path/to/bbs_log" SiteName "bbs.yourname.com" awstats.www.yourname.conf Include "yourname.common.conf" LogFile "/path/to/www_log" SiteName "www.yourname.com" HostAliases="yourname.com" 这样,一个WEB的日志分析就搞定了,配置文件里还有许多参数选项我都还没做仔细了解,等了解了再说吧,呵呵



本文转自 firehare 51CTO博客,原文链接:http://blog.51cto.com/firehare/588213,如需转载请自行联系原作者

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
4月前
|
存储 算法 数据挖掘
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(2)
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(2)
102 1
|
4月前
|
存储 安全 数据挖掘
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(1)
带你读《Apache Doris 案例集》——06 Apache Doris 助力中国联通万亿日志数据分析提速10倍(1)
|
7月前
|
数据可视化 Java 物联网
Apache IoTDB开发之JMX 工具
Java VisualVM 是一个工具,它提供了一个可视化界面,用于在 Java 虚拟机 (JVM) 上运行时查看有关 Java 应用程序的详细信息,以及对这些应用程序进行故障排除和分析。
|
4月前
|
存储 监控 安全
带你读《Apache Doris 案例集》——07查询平均提速700% ,奇安信基于 Apache Doris 升级日志安全分析系统(1)
带你读《Apache Doris 案例集》——07查询平均提速700% ,奇安信基于 Apache Doris 升级日志安全分析系统(1)
|
4月前
|
SQL 存储 安全
带你读《Apache Doris 案例集》——07查询平均提速700% ,奇安信基于 Apache Doris 升级日志安全分析系统(2)
带你读《Apache Doris 案例集》——07查询平均提速700% ,奇安信基于 Apache Doris 升级日志安全分析系统(2)
110 0
|
1月前
|
监控 测试技术 Linux
性能工具之 Apache Bench 入门使用
ab 全称为:apache bench,ab 为小型压力工具,对于在 Linux 中简单压测 HTTP 接口轻巧灵活。
23 1
|
1月前
|
存储 分布式计算 Hadoop
一文了解Apache Hudi架构、工具和最佳实践
一文了解Apache Hudi架构、工具和最佳实践
99 0
|
1月前
|
存储 消息中间件 监控
Zoom 基于Apache Hudi 的流式日志处理实践
Zoom 基于Apache Hudi 的流式日志处理实践
44 1
|
7月前
|
存储 Linux Apache
Apache IoTDB开发之内存工具
IoTDB中的内存分为三部分:写内存,读内存和保留内存。写内存用于数据写入分配。三者的比例可以在配置文件中设置。
128 0
|
8月前
|
存储 Java BI
探索Apache POI库:强大的Excel和Word文档处理工具
在企业应用和数据处理中,Excel和Word文档是常见的数据交换和存储格式。然而,处理和操作这些文档可能是一项繁琐的任务。Apache POI库作为一款强大的文档处理工具,可以帮助我们更轻松地进行Excel和Word文档的读写、编辑和生成。本文将深入探讨Apache POI库的基本概念、特点,以及如何在实际应用中使用它进行文档处理。
406 0

推荐镜像

更多