歡迎來到Linux教程網
Linux教程網
Linux教程網
Linux教程網
Linux教程網 >> Linux管理 >> Linux維護 >> CentOS下使用SARG分析Squid日志的方法匯總

CentOS下使用SARG分析Squid日志的方法匯總

日期:2017/3/2 10:35:11   编辑:Linux維護

作為一個網絡管理員,需要對網絡流量日志進行分析,因為通過流量日志可以看到用戶對網絡服務器的使用情況,及時發現網絡中存在的問題等,而SARG就是很好的網絡流量日志分析工具,下面隨小編一起來了解下CentOS下如何使用SARG來分析Squid日志。

SARG是一款基於網絡的工具,它可以分析Squid日志,並以更詳細的方式展示分析。系統管理員可以利用SARG來監視哪些網站被訪問了,並跟蹤訪問量最大的網站和用戶。本文包含了SARG配置工作。SARG提供了很多有用的特性,但是分析一個原始Squid日志文件並不直接。比如,你如何分析下面Squid日志中的時間戳和數字?

代碼如下:

1404788984.429 1162 172.17.1.23 TCP_MISS/302 436 GET http://facebook.com/ - DIRECT/173.252.110.27 text/html

1404788985.046 12416 172.17.1.23 TCP_MISS/200 4169 CONNECT stats.pusher.com:443 - DIRECT/173.255.223.127 -

1404788986.124 174 172.17.1.23 TCP_MISS/200 955 POST http://ocsp.digicert.com/ - DIRECT/117.18.237.29 application/ocsp-response

1404788989.738 342 172.17.1.23 TCP_MISS/200 3890 CONNECT www.google.com:443 - DIRECT/74.125.200.106 -

1404788989.757 226 172.17.1.23 TCP_MISS/200 942 POST http://clients1.google.com/ocsp - DIRECT/74.125.200.113 application/ocsp-response

1404788990.839 3939 172.17.1.23 TCP_MISS/200 78944 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788990.846 2148 172.17.1.23 TCP_MISS/200 118947 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788990.849 2151 172.17.1.23 TCP_MISS/200 76809 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788991.140 611 172.17.1.23 TCP_MISS/200 110073 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 –

我們使用yum來安裝安裝必要的依賴。

代碼如下:

# yum install gcc make wget httpd crond

在啟動時加載必要的服務

代碼如下:

# service httpd start; service crond start

# chkconfig httpd on; chkconfig crond on

現在我們下載並解壓SARG

上一節教程中,我們展示了如何在CentOS上使用Squid配置透明代理。Squid提供了很多有用的特性,但是分析一個原始Squid日志文件並不直接。比如,你如何分析下面Squid日志中的時間戳和數字?

代碼如下:

1404788984.429 1162 172.17.1.23 TCP_MISS/302 436 GET http://facebook.com/ - DIRECT/173.252.110.27 text/html

1404788985.046 12416 172.17.1.23 TCP_MISS/200 4169 CONNECT stats.pusher.com:443 - DIRECT/173.255.223.127 -

1404788986.124 174 172.17.1.23 TCP_MISS/200 955 POST http://ocsp.digicert.com/ - DIRECT/117.18.237.29 application/ocsp-response

1404788989.738 342 172.17.1.23 TCP_MISS/200 3890 CONNECT www.google.com:443 - DIRECT/74.125.200.106 -

1404788989.757 226 172.17.1.23 TCP_MISS/200 942 POST http://clients1.google.com/ocsp - DIRECT/74.125.200.113 application/ocsp-response

1404788990.839 3939 172.17.1.23 TCP_MISS/200 78944 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788990.846 2148 172.17.1.23 TCP_MISS/200 118947 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788990.849 2151 172.17.1.23 TCP_MISS/200 76809 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 -

1404788991.140 611 172.17.1.23 TCP_MISS/200 110073 CONNECT fbstatic-a.akamaihd.net:443 - DIRECT/184.26.162.35 –

我們使用yum來安裝安裝必要的依賴。

代碼如下:

# yum install gcc make wget httpd crond

在啟動時加載必要的服務

代碼如下:

# service httpd start; service crond start

# chkconfig httpd on; chkconfig crond on

現在我們下載並解壓SARG

代碼如下:

# wget http://downloads.sourceforge.net/project/sarg/sarg/sarg-2.3.8/sarg-2.3.8.tar.gz?

# tar zxvf sarg-2.3.8.tar.gz

# cd sarg-2.3.8

注意: 對於64位的Linux,log.c的源代碼需要用下面的文件打補丁。

代碼如下:

1506c1506

《 if (fprintf(ufile-》file, “%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,ip,url,nbytes,code,elap_time,smartfilter)《=0) {

---

》 if (fprintf(ufile-》file, “%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,ip,url,(int64_t)nbytes,code,elap_time,smartfilter)《=0) {

1513c1513

《 fprintf(fp_log, “%s\t%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,user,ip,url,nbytes,code,elap_time,smartfilter);

---

》 fprintf(fp_log, “%s\t%s\t%s\t%s\t%s\t%”PRIi64“\t%s\t%ld\t%s\n”,dia,hora,user,ip,url,(int64_t)nbytes,code,elap_time,smartfilter);

1564c1564

《 printf(“LEN=\t%”PRIi64“\n”,nbytes);---

》 printf(“LEN=\t%”PRIi64“\n”,(int64_t)nbytes);

如下繼續並編譯/安裝SARG

代碼如下:

# 。/configure

# make

# make install

SARG安裝之後,配置文件可以按你的要求修改。下面是一個SARG配置的例子。

代碼如下:

# vim /usr/local/etc/sarg.conf

access_log /var/log/squid/access.log

temporary_dir /tmp

output_dir /var/www/html/squid-reports

date_format e ## We use Europian DD-MM-YYYY format here ##

## we don’t want multiple reports for single day/week/month ##

overwrite_report yes

現在是時候測試運行了,我們用調試模式運行sarg來查看是否存在錯誤。

代碼如下:

# sarg -x

如果i一切正常,sarg會根系Squid日志,並在/var/www/html/squid-reports下創建報告。報告也可以在浏覽器中通過地址http://《服務器IP》/squid-reports/訪問。

SARG可以用於創建日、周、月度報告。時間范圍用“-d”參數來指定,值的形式很可能為day-n、 week-n 或者 month-n,n的值為向前推移的天/周/月的數量。比如,使用week-1,SARG會生成之前一星期的報告。使用day-2,SARG會生成之前兩天的報告。

作為演示,我們會准備一個計劃任務來每天運行SARG。

代碼如下:

# vim /etc/cron.daily/sarg

#!/bin/sh

/usr/local/bin/sarg -d day-1

文件需要可執行權限。

代碼如下:

# chmod 755 /usr/local/bin/sarg

現在SARG應該會每天准備關於Squid管理的流量報告。這些報告可以很容易地通過SARG網絡接口訪問。

以上就是利用SARG工具,來分析分析Squid日志,並以更詳細的方式展示分析。系統管理員可以利用SARG來監視哪些網站被訪問了,並跟蹤訪問量最大的網站和用戶。

上面就是CentOS下使用SARG分析Squid日志的方法介紹了,本文除了介紹分析Squid日志的方法外,還詳細介紹了SARG日志分析器的配置,希望對你有所幫助。

Copyright © Linux教程網 All Rights Reserved