Apache優化——日誌管理

11.22 訪問日誌不記錄靜態文件

編輯虛擬主機配置文件「httpd-vhosts.conf」：  

[root@1 ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost *:80>
    DocumentRoot "/data/wwwroot/111.com"
    ServerName 111.com
    ServerAlias www.example.com
    <IfModule mod_rewrite.c>
        RewriteEngine on
        RewriteCond %{HTTP_HOST} !^111.com$
        RewriteRule ^/(.*)$ http://111.com/$1 [R=301,L]
    </IfModule>
    ErrorLog "logs/111.com-error_log"
    SetEnvIf Request_URI ".*\.gif$" img
    SetEnvIf Request_URI ".*\.jpg$" img 
    SetEnvIf Request_URI ".*\.png$" img
    SetEnvIf Request_URI ".*\.bmp$" img
    SetEnvIf Request_URI ".*\.swf$" img
    SetEnvIf Request_URI ".*\.js$" img
    SetEnvIf Request_URI ".*\.css$" img  
    #以上爲定義變量：將全部關於圖片的請求定義爲變量img
    CustomLog "logs/111.com-access_log" combined env=!img
    #「env=!img」表示非img變量。本行命令的含義是：不記錄關於變量img的請求日誌。
</VirtualHost>

說明： 將全部訪問圖片的請求定義爲變量img，在訪問記錄（日誌）中將其排除便可。從新加載後使用curl訪問img變量中所指定格式的文件內容時將不會產生訪問記錄。  

擴展：

apache日誌記錄客戶端請求的域名  

正常狀況下，根本就沒有必要記錄這一項，畢竟我們大都根據虛擬主機來設置相應的訪問日誌，但也有個別的狀況，好比 ServerName *.abc.com這樣泛解析的形式，因此有必要記錄一下用戶請求的域名究竟是哪一個。 而apache的LogFormat 中正好有一項值知足了這個需求。即 %V  這裏是大寫的V ,小寫的v 記錄的是我們在虛擬主機中設置的ServerName ，這個的確是沒有必要記錄的。

apache只記錄指定URI的日誌

需求： 把相似請求 www.aaa.com/aaa/... 這樣的請求才記錄日誌。  

方法：   在httpd.conf 或者 相關的虛擬主機配置文件中添加：  

SetEnvIf Request_URI "^/aaa/.*" aaa-request  
CustomLog "|/usr/local/apache/bin/rotatelogs -l /usr/local/apache/logs/aaa-access_%Y%m%d.log 86400" combined env=aaa-request

原理和不記錄圖片等靜態訪問的日誌（ http://www.lishiming.net/thread-561-1-1.html ）是同樣的。  

apache日誌中記錄代理IP以及真實客戶端IP  

默認狀況下log日誌格式爲：  

LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined

，其中%h 是記錄訪問者的IP，若是在web的前端有一層代理，那麼這個%h其實就是代理機器的IP，這不是咱們想要的。咱們須要的是記錄客戶端的真實IP，「%{X-FORWARDED-FOR}i 」該字段會記錄客戶端真實IP，因此log日誌的格式應改成：

LogFormat "%h %{X-FORWARDED-FOR}i %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined

11.23 訪問日誌切割

配置

編輯虛擬主機配置文件：

[root@1 ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost *:80>
    DocumentRoot "/data/wwwroot/111.com"
    ServerName 111.com
    ServerAlias www.example.com
    <IfModule mod_rewrite.c>
        RewriteEngine on
        RewriteCond %{HTTP_HOST} !^111.com$
        RewriteRule ^/(.*)$ http://111.com/$1 [R=301,L]
    </IfModule>
    ErrorLog "logs/111.com-error_log"
    SetEnvIf Request_URI ".*\.gif$" img
    SetEnvIf Request_URI ".*\.jpg$" img 
    SetEnvIf Request_URI ".*\.png$" img
    SetEnvIf Request_URI ".*\.bmp$" img
    SetEnvIf Request_URI ".*\.swf$" img
    SetEnvIf Request_URI ".*\.js$" img
    SetEnvIf Request_URI ".*\.css$" img  
    CustomLog "|/usr/local/apache2.4/bin/rotatelogs -l logs/111.com-access_%Y%m%d.log 86400" combined env=!img
    #使用rotatelogs工具，以系統時間爲基準，天天切割一第二天志，而且日誌名字格式爲「111.com-access_%Y%m%d.log」。
    
    #每小時切割一第二天志，語法： 
    #CustomLog "|/usr/local/apache2.4/bin/rotatelogs logs/access_%Y%m%d%H.log 3600" combined

    

說明： rotatelogs是Apache切割日誌的工具；-l表示使用系統（CST=Chinese time）時間，若是加-l選項，將以默認的（UTC）時間爲準；日誌文件名「%Y%m%d」表示年月日；時間間隔設定爲一天（1day=24h=1440min=86400s）。  

檢測  

• 重載配置文件：  

[root@1 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl graceful

• 訪問、檢測日誌：  

[root@1 ~]# curl -x192.168.8.131:80 111.com/http.jpg -I

[root@1 111.com]# ls /usr/local/apache2.4/logs/
111.com-access_20170801.log  111.com-error_log   abc.com-error_log  error_log
111.com-access_log           abc.com-access_log  access_log         httpd.pid

說明： 配合計劃任務使用，按期清理日誌文件，避免日誌文件累計致使磁盤空間不足。

擴展：

rotatelogs命令  

語法：    rotatelogs [ -l ] logfile [ rotationtime [ offset ]]    rotatelogs [ filesizeM ]  logfile  

選項：   -l：使用本地時間代替GMT時間做爲時間基準。注意：在一個改變GMT偏移量(好比夏令時)的環境中使用-l會致使不可預料的結果。因此必定要加上-l 不然出現的日誌時間和實際時間是相差8小時的。   rotationtime：日誌文件滾動的以秒爲單位的間隔時間。   offset：相對於UTC的時差的分鐘數。若是省略，則假定爲」0″並使用UTC時間。好比，要指定UTC時差爲」-5小時」的地區的當地時間，則此參數應爲」-300″。   filesizeM：指定以filesizeM文件大小滾動，而不是按照時間或時差滾動。  

日誌切割方法2：  

使用cronolog命令：  

一：每一天創建一個新日誌
CustomLog "|bin/cronolog logs/access_%Y%m%d.log" combined

二：每小時創建一個新日誌 
CustomLog "|bin/cronolog logs/access_%Y%m%d%h.log" combined

11.24 靜態元素過時時間

當瀏覽器訪問網站時會把靜態文件（如圖片文件、css、js文件等）緩存到本地電腦，這樣下次訪問的時候就不用去遠程下載了，能夠自定義清除該部分緩存的時間，即設定靜態元素過時時間。該設置可用於優化網站，特別是公司內網。  

配置  

編輯虛擬主機配置文件：  

[root@1 ~]# vim /usr/local/apache2.4/conf/extra/httpd-vhosts.conf
……
<VirtualHost *:80>
    DocumentRoot "/data/wwwroot/111.com"
    ServerName 111.com
    ServerAlias www.example.com
    <IfModule mod_rewrite.c>
        RewriteEngine on
        RewriteCond %{HTTP_HOST} !^111.com$
        RewriteRule ^/(.*)$ http://111.com/$1 [R=301,L]
    </IfModule>

<IfModule mod_expires.c>
    ExpiresActive on  
    #打開該功能的開關 
    ExpiresByType image/gif  "access plus 1 days"
    ExpiresByType image/jpeg "access plus 24 hours"
    ExpiresByType image/png "access plus 24 hours"
    ExpiresByType text/css "now plus 2 hour"
    ExpiresByType application/x-javascript "now plus 2 hours"
    ExpiresByType application/javascript "now plus 2 hours"
    ExpiresByType application/x-shockwave-flash "now plus 2 hours"
    ExpiresDefault "now plus 0 min"
    #以上是定義不一樣類型的文件緩存的時間
</IfModule>
    ErrorLog "logs/111.com-error_log"
    SetEnvIf Request_URI ".*\.gif$" img
    SetEnvIf Request_URI ".*\.jpg$" img 
    SetEnvIf Request_URI ".*\.png$" img
    SetEnvIf Request_URI ".*\.bmp$" img
    SetEnvIf Request_URI ".*\.swf$" img
    SetEnvIf Request_URI ".*\.js$" img
    SetEnvIf Request_URI ".*\.css$" img  
    CustomLog "|usr/local/apache2.4/bin/rotatelogs -l logs/111.com-access_%Y%m%d.log 86400" combined env=!img
    #使用rotatelogs工具，以系統時間爲基準，天天切割一第二天志，而且日誌名字格式爲「111.com-access_%Y%m%d.log」。

說明： 在配置文件添加mod_expires.c模塊內容，其他不變。  

檢測  

檢測語法錯誤：  
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK

檢測Apache配置文件是否開啓expire模塊：  
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl -M |grep expires

說明： 在此未檢測到expires模塊，因此須要編輯Apache配置文件，加載expires模塊。    

配置Apache，加載expires模塊  

編輯Apache配置文件：  

[root@1 111.com]# vim /usr/local/apache2.4/conf/httpd.conf

LoadModule expires_module modules/mod_expires.so

加載配置文件：
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl -t
Syntax OK
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl graceful

檢查模塊是否開啓：
[root@1 111.com]# /usr/local/apache2.4/bin/apachectl -M |grep expires
 expires_module (shared)

說明： 輸入「/」查找expires模塊，並開啓加載該模塊的命令行（去掉#便可）。  

再次檢測

[root@1 111.com]# curl -x192.168.8.131:80 111.com/baidu.png -I
HTTP/1.1 200 OK
Date: Tue, 01 Aug 2017 10:17:36 GMT
Server: Apache/2.4.27 (Unix) PHP/5.6.30
Last-Modified: Tue, 01 Aug 2017 10:13:45 GMT
ETag: "e7a-555ae670b0840"
Accept-Ranges: bytes
Content-Length: 3706
Cache-Control: max-age=86400
Expires: Wed, 02 Aug 2017 10:17:36 GMT
Content-Type: image/png

說明： 當前時間「Date: Tue, 01 Aug 2017 10:17:36 GMT」，緩存時長「Cache-Control: max-age=86400s」，失效時間「Expires: Wed, 02 Aug 2017 10:17:36 GMT」，即png格式圖片緩存時長爲1天。