sarg安装与配置附录配置信息

sarg安装与配置

安装环境centos6.4，软件源是6.5的，6.4以前的好像关闭了，害我重新改了源文件。
软件包：sarg-2.3.7有2.4版的，但很多组件要更新，所以不闲麻烦的话就去试试吧。反正我放弃了。。。
下载的直接是压缩包，解压后cd到文件目录，然后configure
./configure --prefix=/usr/local/sarg--enable-bindir=/usr/local/sarg/bin
make
make instal

#安装成功后，在/usr/local/sarg/目录中，有一个配置文件为sarg.conf,我们通过修改配置文件的参数，来达到对日志进行有规则的分析。也可以通过命令行参数实现。
#sarg配置文件的方法和squid配置文件的配置方法类似，只要修改带有关键字的行：
"language english"
  指定网页报告文件的语言类型，很可惜不支持中文网页。
2.3.7 的版本是支持中文的，而且sarg.conf中是看不到language这一关键字项的，直接跳过就好了

"access_log /var/log/squid/access.log"
  指定squid日志文件绝对路径。

"title "squid 使用报告"
  指定网页标题。

"temporary_dir /var/tmp"
  指定临时文件目录，请确认该目录所在的分区足够大先，1g以上。

"output_dir /var/www/html/squid-reports"
  指定网页报告文件输出路径。

"topuser_sort_field connect reverse bytes reverse"
  在top排序中，指定连接次数(connect)，访问字节数(bytes)采用降序排列，升序请使用normal替代reverse

"user_sort_field connect reverse"
  对于每个用户的访问纪录，连接次数按降序排列

"exclude_hosts /usr/local/sarg/norecords"
指定不计入排序的站点列表文件名为/usr/local/sarg/norecords，对于客户端访问的这些站点，将不会被top排序中，norecords文件样本:
  google.com
  csdn.net
  microsoft.com

"date_format e"
  启动sarg进程是如果使用日期参数-d时，请使用和配置文件一致的日期格：
   e(europe=dd/mm/yy),
   u(usa=mm/dd/yy),
   w(weekly=yy.ww)

"topuser_fields num date_time userid connect bytes %bytesin-cache-out used_time milisec %time total average"
  指定top排序的域，可以取掉一些不关紧要的域：in-cache-out used_time等

"weekdays 1-5"
  指定top排序星期周期为星期一到星期五，0表示星期天

"hours 9-11,13-16"
  指定top排序的时间周期为9:00-11:59，13:00-16:59，

  至此，sarg.conf文件的配置基本完成了，也可以直接参考附件。

sarg的命令行解释如下：
 sarg -h
 sarg: usage [options...]
 -a hostname or ip address

指定不计入排序的主机名称或地址
 -b useragent log
 用户代理日志文件输出
 -c exclude file
指定不计入排序的站点列表文件名为/usr/local/sarg/norecords，对于客户端访问的这
 些站点，将不会被top排序中
 -d date dd/mm/yyyy-dd/mm/yyyy
 指定日期范围
 -e email address to send reports (stdout forconsole)
 指定报告接收者邮件
 -f config file (/usr/local/sarg/sarg.conf)
 指定配置文件
 -g date format [e=europe ->dd/mm/yy, u=usa -> mm/dd/yy]
 指定输入的日期格式
 -h help (this...)
 列帮助信息
 -i reports by user and ip address
 指定客户端排序采用用户名或者ip地址
 -l input log
 指定squid日志文件绝对路径。
 -o output dir
 指定网页报告文件输出路径，推荐使用webmaster或其他非admin用户运行
 sarg。
 -p use ip address instead userid (reports)
 使用ip地址作为userid域
 -w temporary dir
 指定临时文件目录，请确认该目录所在的分区足够大先，1g以上。

创建输出目录
mkdir /var/www/html/squid-reports/

之后再运行：/usr/local/sarg/sarg  生成报表。就可以通过http://ip/squid-reports打开报表了
其实centos可以直接使用命令sarg的，不需要再带这个命令脚本的文件目录
记得要先安装apache软件。。。。

二，sarg日志分析软件的运行
  一般来说，我们希望系统可以自动生成报告在sarg的主页上可以找到日/月/年的自动生成脚本
sarg -d 日/月/年-日/月/年 #执行sarg的这个命令就可生成你想要的时间段的上网情况

也可以使用crontab来每日自动执行

首先建立执行脚本分为日、周、月三个文件
日报脚本
――――――

vi /usr/local/sarg/bin/daily

内容如下：

#!/bin/bash

#Get yesterday date
YESTERDAY=$(date --date "1 day ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8（使输出的报表为中文简体字样的报表）
/usr/local/sarg/bin/sarg -o /var/www/html/sarg/daily -d $YESTERDAY> /dev/null2>&1
exit 0

周报脚本
――――――――

vi /usr/local/sarg/bin/weekly

内容如下：

  #!/bin/bash
  #Generate Access.log for correct weekly reports
  cat /var/log/squid/access.log > /var/log/squid/access.log.week
   #Get yesterday date
  YESTERDAY=$(date --date "1 days ago" +%d/%m/%Y)
   #Get one week ago date
   WEEKAGO=$(date --date "7 days ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8
   /usr/local/sarg/bin/sarg -l /var/log/squid/access.log.week -o /var/www/html/squid-reports/weekly -d $WEEKAGO-$YESTERDAY > /dev/null 2>&1
 /usr/sbin/squid -k rotate
 exit 0

月报脚本
――――――

vi /usr/local/sarg/bin/monthyl

内容如下：

#!/bin/bash

#Get yesterday date
YESTERDAY=$(date --date "1 day ago" +%d/%m/%Y)

#Get 1 month ago date
MONTHAGO=$(date --date "1 month ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8

/usr/local/sarg/bin/sarg -o /var/www/html/squid-reports/monthly -d$MONTHAGO-$YESTERDAY  > /dev/null2>&1

/usr/local/squid/sbin/squid -k rotate

exit 0

然后运行

crontab -e

内容如下：

30 1 * * * /usr/local/sarg/bin/daily
01 0 * * 1 /usr/local/sarg/bin/weekly
01 3 1 * * /usr/local/sarg/bin/monthly

这样在每天都会自动生成一个配置文件来查看

为文件曾加刻执行的权限
chmod 755 /usr/local/sarg/bin/daily
chmod 755 /usr/local/sarg/bin/weekly
chmod 755 /usr/local/sarg/bin/monthly
这一步一定不能忘，不然上面建的脚本就是普通文件，不信可以ls -lF 看看。

最后还得建立一个存放输出记录的目录
mkdir /var/www/html/squid-reports/daily
mkdir /var/www/html/squid-reports/weekly
mkdir /var/www/html/squid-reports/monthly
这个也不能忘，不然你前面的所有功夫都是白费的，因为文件没有输出目录，你也就看不到效果了。

参考来源：http://blog.sina.com.cn/s/blog_6619c04201010kjr.html

附录：我的sarg.conf文件改动的参数
 7 #access_log /usr/local/squid/var/logs/access.log
 8 access_log /var/log/squid/access.log

14 #graphs yes
15 graphs  no


27 #title "Squid User Access Reports"
28 title   "缓存服务器使用报表"

33 #font_face Tahoma,Verdana,Arial
34 font_face       Verdana,Arial

39 #header_color darkblue
40 header_color 00B2EE

46 #header_bgcolor blanchedalmond
47 header_bgcolor #DCDCDC

52 #font_size 9px
53 font_size  12px

58 #header_font_size 9px
59 header_font_size  12px

64 #title_font_size 11px
65 title_font_size 12px

71 # background_color white
72 background_color white

77 #text_color #000000
78 text_color  #000000

83 #text_bgcolor lavender
84 text_bgcolor white

89 #title_color green
90 title_color  green

95 #logo_image none
96 logo_image none

106 #logo_text_color #000000
107 logo_text_color #000000

113 #image_size 80 45
114 image_size 80 45

125 #password none
126 password none

132 #temporary_dir /tmp
133 temporary_dir /tmp

139 #output_dir /var/www/html/squid-reports
140 output_dir /var/www/html/squid-reports

157 #output_email none
158 output_email none

附赠小技巧，sarg的那个log图标是可以换的，先find / -name sarg.png记录输出结果的目录，然后找一个自己想要log的重命名为sarg.png替换掉find目中的图片

如果出现crontab中的日周月报表不自动生成的情况就用下面的操作

cp -p  /usr/local/sarg/bin/daily  /etc/cron.daily/
cp -p  /usr/local/sarg/bin/weekly  /etc/cron.weekly/
cp -p  /usr/local/sarg/bin/monthly  /etc/cron.monthly/
不知道其他人遇到过没有，我遇到了，所以这里就直接把脚本拷贝到系统自带的文件夹中

然后更改crontab内容

crontab -e

内容如下：

30 1 * * *   /etc/cron.daily//daily
1   0 * * 1 /etc/cron.weekly/weekly
1   3 1 * * /etc/cron.monthly/monthly