服务器 频道

Apache 服务器 Log 分析应用实例

  【IT168 服务器学院】互联网的飞速发展,无论是传统企业的网站,还是互联网企业,为了了解自己的客户来源,点击率等资料,对网站日志的分析尤为重要,以下就本人所做的日志分析系统与大家分享,希望能对大家有所帮助。

  一,所用软件及工具

  1,Apache服务器 官方网址:http://www.apache.org
  2,awstats 日志分析软件 官方网址:http://awstats.sourceforge.net
  3,cronolog 日志截取软件 官方网址:http://www.cronolog.org

  二,环境构架

  1,RedHat AS 3

  2,Apache
  ./configure –prefix=/usr/local/apache2/ --enable-so
  make
  make install

  3, awstats
  直接tar到 /usr/local/awstats

  4,cronolog
  ./configure –prefix=/usr/local/cronolog
  make
  make install

  三, 配置

  1, apache

  a,让apache中的某个虚拟主机产生日志:

  全局环境变量设置:

  LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
  SetEnvIf Request_URI \.gif$ gif-image
  SetEnvIf Request_URI \.GIF$ gif-image
  SetEnvIf Request_URI \.jpg$ gif-image
  SetEnvIf Request_URI \.JPG$ gif-image
  SetEnvIf Request_URI \.png$ gif-image
  SetEnvIf Request_URI \.swf$ gif-image
  SetEnvIf Request_URI \.SWF$ gif-image
  SetEnvIf Request_URI \.css$ gif-image
  SetEnvIf Request_URI \.CSS$ gif-image
  SetEnvIf Request_URI \.js$ gif-image
  SetEnvIf Request_URI \.JS$ gif-image
  SetEnvIf Request_URI \.ico$ gif-image 

  产生日志但不包括图片。
  虚拟主机日志设置

  <VirtualHost 12.34.56.78:80>
          ServerAdmin webmaster@abc.net
          DocumentRoot /db/htdocs/www
          ServerName www.abc.net
          CustomLog "|/usr/local/cronolog/sbin/cronolog /db/logs/www.%Y-%m-%d.log" combined env=!gif-image
  #用cronolog截取存放在/db/logs/下的按日期产生的apache日志文件
  </VirtualHost>

  注:日志文件是针对每一个虚拟主机产生的所以可以配置一台服务器上多个虚拟主机的日志分析

  b,别名设置

  #
  # Directives to allow use of AWStats as a CGI
  #
  Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"
  Alias /awstatscss "/usr/local/awstats/wwwroot/css/"
  Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"
  ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"

  #
  # This is to permit URL access to scripts/files in AWStats directory.
  #
  <Directory "/usr/local/awstats/wwwroot">
      Options None
      AllowOverride None
      Order allow,deny
      Allow from all
  </Directory>

  该配置在运行awstats/tools/awstats_configure.pl 后会自动产生所以不用手动添加。

  c,awstats需要cgi的支持如果没有添加cgi可以现在添加

  ./apxs -c -i /usr/local/src/httpd-2.0.50/modules/generators/mod_cgi.c

  再在httpd.conf 中添加

  LoadModule cgi_module         modules/mod_cgi.so

  d为了保护日志统计信息需要对某些目录进行认证设置,需要认证模块的支持

  ./apxs -c -i /usr/local/src/httpd-2.0.50/..../mod_auth.c

  再在httpd.conf 中添加

  LoadModule auth_module        modules/mod_auth.so

  配置需要认证的目录:

  <Directory "/db/htdocs/www/awstat/">
     AuthType Basic
    AuthName "Restricted Files"
    AuthUserFile /usr/local/apache2/passwd/passwords
    Require user loguser
    </Directory>

  其中在 /usr/local/apache2/passwd/下产生passwords 的密码文件
  运行如下代码产生用户名为loguser用户及其密码

  /usr/local/apache2/bin/htpasswd -c /usr/local/apache2/passwd/passwords  loguser

  注意:先要在 /usr/local/apache2/下建passwd目录

  2,Awstats

  运行 /usr/local/awstats/tools/awstats_configure.pl
  主要设置的是需要输入做统计的主机名的配置文件名如:www.abc.net
  接着修改 刚才配置是产生的awstats配置文件 默认位置在:
  /etc/awstats/awstats.www.abc.net.con 主要做指定log位置

  LogFile="/db/logs/www.%YYYY-4-%MM-2-%DD-2.log"

  创建目录:mkdir /var/lib/awstats/
  执行:

  /usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.abc.net

  更新,update 后可以在浏览器中输入 http://www.abc.net/awstats/awstats.pl 进行访问了。

  3,cronolog (基本不用什么修改)

  4,crontab的修改

  在 crontab中添加如下 命令保证15分钟更新一次,也可以根据你自己的需要修改更新的间隔

  */15 * * * * /usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.abc.net

  四,安全性考虑

  1, 以上的设置由于要cgi支持,也增加了安全隐患可以用awstats 自带的awstats_buildstaticpages.pl来 生成静态页面 可以添加到crontab中

  */15 * * * * /usr/local/awstats/tools/awstats_buildstaticpages.pl -update -config=www.abc.net -lang=cn -dir=/db/htdocs/www/awstat/ -awstatsprog=/usr/local/awstats/wwwroot/cgi-bin/awstats.pl

  这样没15分钟在/db/htdocs/www/awstat/ 下生成各种静态页面

  2,保护/db/htdocs/www/awstat/禁止未授权用户访问

  在httpd.conf中添加

  <Directory "/db/htdocs/www/awstat/">
    AuthType Basic
  AuthName "Restricted Files"
    AuthUserFile /usr/local/apache2/passwd/passwords
     Require user loguser
    </Directory>

  如果www.abc.net 虚拟主机 主目录为/db/htdocs/www/ 则在浏览器中输入http://www.abc.net/awstat/awstats.www.abc.net.html 就可以通过认真访问静态页面

  3,如果用静态页面就不要忘了注释掉

  LoadModule cgi_module modules/mod_cgi.so

  五,献给我最爱的飞飞。

  六,由于本人是初学者,本文略显粗糙,如有任何指点和问题欢迎和我联系,大家相互交流提高 :hoash2003@hotmail.com
  

0
相关文章