[精彩] 日志分析软件awstats的安装使用简易指南

 

# Set your primary language (ISO-639-1 language codes).

# Possible value:

#  Albanian=al, Bosnian=ba, Bulgarian=bg, Catalan=ca,

#  Chinese (Taiwan)=tw, Chinese (Simpliefied)=cn, Czech=cz, Danish=dk,

#  Dutch=nl, English=en, Estonian=et, Euskara=eu, Finnish=fi,

#  French=fr, Galician=gl, German=de, Greek=gr, Hebrew=he, Hungarian=hu,

#  Icelandic=is, Indonesian=id, Italian=it, Japanese=jp, Korean=kr,

#  Latvian=lv, Norwegian (Nynorsk)=nn, Norwegian (Bokmal)=nb, Polish=pl,

#  Portuguese=pt, Portuguese (Brazilian)=br, Romanian=ro, Russian=ru,

#  Serbian=sr, Slovak=sk, Slovenian=si, Spanish=es, Swedish=se, Turkish=tr,

#  Ukrainian=ua, Welsh=cy.

#  First available language accepted by browser=auto

# Default: "auto"

#

Lang="auto"





# Set the location of language files.

# Example: "/usr/share/awstats/lang"

# Default: "./lang" (means lang directory is in same location than awstats.pl)

#

DirLang="./lang"

 

AWStats is a free web server logfile analyzer to show you advanced web

statistics.

AWStats comes with ABSOLUTELY NO WARRANTY. It's a free software distributed

with a GNU General Public License (See LICENSE file for details).



Syntax: awstats.pl -config=virtualhostname 



  This runs awstats in command line to update statistics of a web site, from

   the log file defined in AWStats config file (with -update option), or build

   a HTML report (with -output option).

  First, awstats tries to read awstats.virtualhostname.conf as the config file.

  If not found, awstats tries to read awstats.conf

  Note 1: Config files (awstats.virtualhostname.conf or awstats.conf) must be

   in /etc/awstats, /usr/local/etc/awstats, /etc or same directory than

   awstats.pl script file.

  Note 2: If AWSTATS_FORCE_CONFIG environment variable is defined, AWStats will

   use it as the "config" value, whatever is the value on command line or URL.

   See AWStats documentation for all setup instrutions.



Options to update statistics:

  -update        to update statistics (default)

  -showsteps     to add benchmark information every 8192 lines processed

  -showcorrupted to add output for each corrupted lines found, with reason

  -showdropped   to add output for each dropped lines found, with reason

  -updatefor=n   to stop the update process after parsing n lines

  -LogFile=x     to change log to analyze whatever is 'LogFile' in config file

  Be care to process log files in chronological order when updating statistics.



Options to show statistics:

  -output      to output main HTML report (no update made except with -update)

  -output=x    to output other report pages where x is:

               alldomains       to build page of all domains/countries

               allhosts         to build page of all hosts

               lasthosts        to build page of last hits for hosts

               unknownip        to build page of all unresolved IP

               allemails        to build page of all email senders (maillog)

               lastemails       to build page of last email senders (maillog)

               allemailr        to build page of all email receivers (maillog)

               lastemailr       to build page of last email receivers (maillog)

               alllogins        to build page of all logins used

               lastlogins       to build page of last hits for logins

               allrobots        to build page of all robots/spider visits

               lastrobots       to build page of last hits for robots

               urldetail        to list most often viewed pages 

               urldetail:filter to list most often viewed pages matching filter

               urlentry         to list entry pages

               urlentry:filter  to list entry pages matching filter

               urlexit          to list exit pages

               urlexit:filter   to list exit pages matching filter

               osdetail         to build page with os detailed versions

               browserdetail    to build page with browsers detailed versions

               unknownbrowser   to list 'User Agents' with unknown browser

               unknownos        to list 'User Agents' with unknown OS

               refererse        to build page of all refering search engines

               refererpages     to build page of all refering pages

               keyphrases       to list all keyphrases used on search engines

               keywords         to list all keywords used on search engines

               errors404        to list 'Referers' for 404 errors

  -staticlinks to have static links in HTML report page

  -staticlinksext=xxx to have static links with .xxx extension instead of .html

  -lang=LL     to output a HTML report in language LL (en,de,es,fr,it,nl,...)

  -month=MM    to output a HTML report for an old month MM

  -year=YYYY   to output a HTML report for an old year YYYY

  Those 'date' options doesn't allow you to process old log file. They only

  allow you to see a past report for a chosen month/year period instead of

  current month/year.



Other options:

  -debug=X     to add debug informations lesser than level X (speed reduced)



Now supports/detects:

  Web/Ftp/Mail log analyze (and load balanced log files)

  Reverse DNS lookup (IPv4 and IPv6) and GeoIP lookup

  Number of visits, number of unique visitors

  Visits duration and list of last visits

  Authenticated users

  Days of week and rush hours

  Hosts list and unresolved IP addresses list

  Most viewed, entry and exit pages

  Files type and Web compression (mod_gzip, mod_deflate stats)

  Screen size

  Number of times site is 'added to favorites bookmarks'

  Ratio of Browsers with support of: Java, Flash, RealG2 reader,

                        Quicktime reader, WMA reader, PDF reader

  Configurable personalized reports

  269 domains/countries

  335 robots

  5 worm's families

  35 operating systems

  99 browsers

  132 search engines (and keyphrases/keywords used from them)

  All HTTP errors with last referrer

  Report by day/month/year

  Dynamic or static HTML or XHTML reports, static PDF reports

  Indexed text or XML monthly database

  And a lot of other advanced features and options...

New versions and FAQ at http://awstats.sourceforge.net

bash-2.05# ls -l
total 22
-rw-r--r--   1 root     other       6721 Aug 19 16:27 README.TXT
drwxr-xr-x   2 nobody   other       1024 Nov 15 11:33 data
drwxr-xr-x   3 root     other       1024 Aug 19 16:27 docs
drwxr-xr-x   4 root     other        512 Aug 19 16:27 tools
drwxr-xr-x  12 nobody   other        512 Aug 22 17:55 wwwroot
bash-2.05# pwd
/usr/local/awstats
引用：
必须保证 awstats下面的data和wwwroot属主和httpd.conf 配置文件的中的user条目中的用户相同，相对你的问题就是apache用户不是该目录及目录下的属主，解决方法su - root ; chown -R apache data wwwroot

---

 missing-cn 回复于：2005-12-01 17:49:13

修补放到了blog里面，有兴趣的可以看一看
http://blog.chinaunix.net/article.php?articleId=55192&blogId=8983

---

 lingy 回复于：2005-12-02 09:22:18

奇怪，这是我的httpd.conf
#
# If you wish httpd to run as a different user or group, you must run
# httpd as root initially and it will switch.  
#
# User/Group: The name (or #number) of the user/group to run httpd as.
#  . On SCO (ODT 3) use "User nouser" and "Group nogroup".
#  . On HPUX you may not be able to use shared memory as nobody, and the
#    suggested workaround is to create a user www and use that user.
#  NOTE that some kernels refuse to setgid(Group) or semctl(IPC_SET)
#  when the value of (unsigned)Group is above 60000; 
#  don't use Group #-1 on these systems!
#
User apache
Group apache



[root@www awstats]# ll
total 44
drwxr-xr-x  2 apache root   4096 Nov 30 10:35 data
drwxr-xr-x  3 root   root   4096 Nov 14 14:29 docs
-r--r--r--  1 root   root   6721 Feb 26  2005 README.TXT
drwxr-xr-x  4 root   root   4096 Nov 14 14:29 tools
drwxr-xr-x  7 apache apache 4096 Nov 14 14:29 wwwroot
但还是不行

---

 gaussong 回复于：2005-12-02 16:01:53

俺现在使用的是webalizer分析软件，看看啥时候试试awstats这个玩艺。
；）

---

 missing-cn 回复于：2005-12-02 16:18:59

那麻烦你把完整的错误信息，尽量多的提供上来再帮你看看。
引用：原帖由 lingy 于 2005-12-2 09:22 发表
奇怪，这是我的httpd.conf
#
# If you wish httpd to run as a different user or group, you must run
# httpd as root initially and it will switch.  
#
# User/Group: The name (or #number) of the us ... 

---

 lingy 回复于：2005-12-02 16:46:43

麻烦missing-cn 了
error_log的纪录就两条
[Fri Dec 02 16:44:53 2005] [error] [client xxx] (13)Permission denied: exec of '/usr/local/awstats/wwwroot/cgi-bin/awstats.pl' failed
[Fri Dec 02 16:44:53 2005] [error] [client xxx] Premature end of script headers: awstats.pl


apache是否需要调用perl模块，怎样测试apache是否支持perl

[ 本帖最后由 lingy 于 2005-12-2 16:48 编辑 ]

---

 missing-cn 回复于：2005-12-02 17:21:09

引用：原帖由 lingy 于 2005-12-2 16:46 发表
麻烦missing-cn 了
error_log的纪录就两条
[Fri Dec 02 16:44:53 2005] [error] [client xxx] (13)Permission denied: exec of '/usr/local/awstats/wwwroot/cgi-bin/awstats.pl' failed
[Fri Dec 02 16:44:53 ... 



想看看完整的httpd.conf了，方便的时候贴贴。

---

 goodcjh2005 回复于：2005-12-08 09:57:10

精辟，值得学习

---

 dgvri 回复于：2006-03-30 10:19:26

有没有办法让它不统计一个我指定的IP的访问量，比如公司的出口IP，就没必要统计，有没有这样的项，找了好几遍都没看到。

---

 missing-cn 回复于：2006-04-04 16:34:58

应该是没有的。

---

 dgvri 回复于：2006-04-05 08:57:37

有，是这一个：
SkipHosts="X。X。X。X    X。X。X。X"
我试了，可以用，它的意思是跳过指定的IP，就是不统计指定期IP的访问量。

---

 missing-cn 回复于：2006-04-05 10:11:30

惭愧！收回楼上的话。因为很久不用awstat了，看到你的问题，就大概回忆了一下，就给出结论了，实在不好意思。

引用：原帖由 dgvri 于 2006-4-5 08:57 发表
有，是这一个：
SkipHosts="X。X。X。X    X。X。X。X"
我试了，可以用，它的意思是跳过指定的IP，就是不统计指定期IP的访问量。 

---

 cxm.cm 回复于：2006-04-05 10:50:54

大家可以下载6.4的包,这个包都是中文的!

---

 vepeta 回复于：2006-06-29 17:10:24

我现在正在整6.5，这篇文章对我帮助很多！

---

 pilgrim_kevin 回复于：2006-08-02 03:52:17

不得不顶一下。

---

 wgl155 回复于：2006-08-07 16:38:23

我通过ip地址的方式可以解决了这个问题 但是不知为什么？
比如：http://211.xxx.xxx.xxx/awstats/awstats.pl?config=demo

---

 ndren 回复于：2006-08-07 16:47:24

尽管目前我还用不上，不过仍旧很感谢楼主的奉献。

---

 HonestQiao 回复于：2006-08-07 17:12:55

呵呵，我都用了多年了，从单机到集群的，我都用它。

---

 spiceboy 回复于：2006-08-08 03:01:03

这玩意儿挺好使的。
一直用。
不过，能把ip换成手机号码来统计吗？还没研究过呢。
谁用过？

---

 HonestQiao 回复于：2006-08-08 08:34:35

引用：原帖由 spiceboy 于 2006-8-8 03:01 发表
这玩意儿挺好使的。
一直用。
不过，能把ip换成手机号码来统计吗？还没研究过呢。
谁用过？ 


你是想统计wap啊，那也应该是可以的啊。

---

 hoo7 回复于：2006-08-08 16:53:42

由于日志格式不正确，会出现：

Your AWStats LogFormat parameter is:

1

This means each line in your web server log file need to have "combined log format" like this:

111.22.33.44 - - [10/Jan/2001:02:14:14 +0200] "GET / HTTP/1.1" 200 1234 "http://www.fromserver.com/from.htm" "Mozilla/4.0 (compatible; MSIE 5.01; Windows NT 5.0)"

如果在awstats.www.conf中
修改

#LogFormat=1

LogFormat = "%virtualname %host %host_r %other %other %time1 %methodurl %code %bytesd %referer"

就会出现

Your AWStats LogFormat parameter is:

%virtualname %host %host_r %other %other %time1 %methodurl %code %bytesd %referer

This means each line in your web server log file need to have the following personalized log format:

%virtualname %host %host_r %other %other %time1 %methodurl %code %bytesd %referer

我要修改awstats的日志格式，因该在哪修改？
谢谢！

---

 wxyhb 回复于：2006-09-30 08:18:27

我的都配起来了,但IE访问时打出如下日志:
Warning: Perl versions before 5.6 cannot handle nested includes
我perl -v
This is perl, v5.8.0 built for i386-linux-thread-multi
(with 1 registered patch, see perl -V for more detail)

Copyright 1987-2002, Larry Wall

Perl may be copied only under the terms of either the Artistic License or the
GNU General Public License, which may be found in the Perl 5 source kit.

Complete documentation for Perl, including FAQ lists, should be found on
this system using `man perl' or `perldoc perl'.  If you have access to the
Internet, point your browser at http://www.perl.com/, the Perl Home Page.

哪位遇到过,我该如何做?谢谢!

---

 webiase 回复于：2007-06-28 09:47:48

Webiase是一个基于JAVA的日志分析工具。Webiase的产品理念是Web BI Ease,在设计开发中始终强调简单易用，Webiase的优势在于：
•        界面友好：Webiase是完全基于Web应用的日志分析工具，浏览器直接调用完成所有系统功能
参考输出样例：http://www.webiase.com/sample
•        基于java：并且很好的解决了跨平台问题，系统本身可以运行在GNU/Linux上或Windows上；分析的日志直接支持Apache格式 (combined)和IIS格式(需要修改)。
Webiase完全可以实现用一套系统完成对自身站点不同WEB服务器：GNU/Linux/Apache和Windows/IIS服务器的统一统计。
•        效率比较高：Webiase输出统计项目丰富全面，日志分析速度可以达到7000条/秒左右，对于一个日访问量百万级的站点，这个速度都是足够的；
•        配置/定制方便：系统提供了足够灵活但缺省也很合理的配置规则，需要修改的缺省配置不超过3，4项就可以开始运行；
•        Webiase的设计是面向精确的"Human visits"设计的，因此很多搜索引擎的机器人访问都被过滤掉了，因此有可能比其他日志统计工具统计的数字要低，来自公司内部的访问也可以通过IP过滤设置过滤掉（暂不提供）。
•        可以生成超过30个以上的各种图表，并付带有多个3维统计图.，并且支持导出pdf、excel等各式报表。
日志统计系统在站点的用户行为分析中扮演了重要的角色，尤其是对于来自搜索引擎的关键词访问统计：是很有效的用户行为分析数据来源。

下载路径:http://www.webiase.com/download/Webiase-1.0beta-setup.exe

---

 dgvri 回复于：2007-07-02 15:02:15

呵呵,才看出来,照楼主的方法,根就无法访问,你忘了把以/usr/local/awstats/tools里的http_conf里的内容加到apache的httpd.conf里了,所以,根本无法访问.
Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"
Alias /awstatscss "/usr/local/awstats/wwwroot/css/"
Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"
ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"

#
# This is to permit URL access to scripts/files in AWStats directory.
#
<Directory "/usr/local/awstats/wwwroot">
    Options None
    AllowOverride None
    Order allow,deny
    Allow from all
</Directory>
~

---

 dgvri 回复于：2007-07-02 15:05:29

hoo7 
圣骑士:::

你不用哪样配,你可以先装个cronlog把日志文件搞成一天一个的,格式如下:
access_log.%y-%m-%d 结果就是access_log.07-07-02   (两位月日年)
然后在awstats的配置文件里把LogFormat 改成:access_log.%YY-%MM-%DD就行了.

---

 missing-cn 回复于：2007-08-31 12:16:23

都这么久了，还有人看，感慨ing ～ 

考虑是不是把webtrends的经验心得跟大家共享一下。

---

 kevinadmin 回复于：2008-04-14 13:57:29

引用：原帖由 HonestQiao 于 2006-8-7 17:12 发表 [url=http://bbs.chinaunix.net/redirect.php?goto=findpost&pid=5593794&ptid=641101]
呵呵，我都用了多年了，从单机到集群的，我都用它。 



能不能把你的配置给贴出来看看，我最近也要做一个日志分析的，是web集群，你是怎么做的，先把日志分割了，再合并，再分析的吗？？

---

 missing-cn 回复于：2008-04-14 14:56:23

引用：原帖由 kevinadmin 于 2008-4-14 13:57 发表 [url=http://bbs.chinaunix.net/redirect.php?goto=findpost&pid=8213153&ptid=641101]



能不能把你的配置给贴出来看看，我最近也要做一个日志分析的，是web集群，你是怎么做的，先把日志分割了，再合并，再分析的吗？？ 


这么老得贴子又翻出来了，真让我诧异。。。。

先说一下，awstats只是我们当初从头做网站得时候，对日志分析不太懂，就找了个简单来用，到了后来随着网站得发展壮大发现已经满足不了实际需要，就改用了webtrends来分析。

所以awstats对于集群级别得日志分析已经不合适了：（

---

 murenfeng 回复于：2008-04-16 02:00:52

日志真的很重要啊，所以更要用好分析日志的工具。

---

 gron 回复于：2008-08-20 16:42:53

有没有 办法 把多个 虚拟主机的 分别统计出来的页面 放在同一个 浏:em14: 览窗口里啊？