**web
**安全
防火牆的主要功能除了其自己能進行有效控制網絡訪問以外,還有一個很重要的功能就是能清晰地記錄網絡上的訪問,並自動生成日誌進行保存。雖然日誌格式會因防火牆廠商的不一樣而形態萬千,但被記錄下的主要信息大致上倒是一致的。不管是後面咱們談到的PIX、ASA或是CheckPoint放火牆其產生的日誌內容均相似。這就代表,任何鏈接或者請求,例如TCP、UDP、ICMP鏈接記錄、鏈接的流量信息、鏈接創建時間等,防火牆日誌都會將其逐一體現。因此概括起來,防火牆日誌大體包含消息發送源IP地址、消息目的IP、消息流向、消息的內容,以及應用幾方面。
防火牆天天要產生大量的日誌文件,防火牆管理員針對這未經任何處理和分析的龐大的日誌進行管理是很困難的。所以,日誌的統計和分析如今已經成爲防火牆功能中必不可少的一項,管理員不但能夠按照不一樣的需求來查找日誌、審計日誌,還能夠分析網絡帶寬的利用率、各類網絡協議和端口的使用狀況等。防火牆日誌還會產生安全警告及一些對網絡安全管理頗有幫助的信息。這極大的方便了管理員對防火牆的安全管控。
本文以Linux下的iptables爲例講解防火牆日誌,下面看一段iptables日誌
Jun 19 17:20:04 webkernel: NEW DRAP IN=eth0 OUT=MAC=00:10:4b:cd:7b:b4:00:e0:le:b9:04:al:08:00SRC=192.168.150.1 DST=192.168.150.152 LEN=20 TOS=0X00 PREC=0x00 TTL=249ID=10492 DF PROTO=UDP SPT=53 DPT=32926 LEN=231
對於此日誌解釋見表1。
表1 iptablesLog字段解釋
序號
字段名稱
含義服務器
1
Jun 19 17:20:24
日期時間,由syslog生成網絡
中括號出如今兩個地方,在ICMP協議中做爲協議頭的遞歸使用;在數據包長度出現非法時用於指出數據實際長度工具
2、LOG日誌格式的思考:
從表1的描述可看出,iptables日誌記錄的信息不少並且顯得很凌亂,在分析時面臨如下幾個問題:
(1)MAC的表示過於簡單,把目標MAC、源MAC及長度類型所有混在一塊兒,不利於閱讀。
(2)在表中的序號十二、13中TOS和PREC的值都爲「0x00」標誌位表示方式混亂。
(3)在日誌中沒有記錄數據包內容,特別是對一些被拒絕的數據包,若是有記錄數據包內容將有助於查找攻擊方式、方法。
(4)沒有記錄規則號,對於被記錄的數據包,當須要查看它由於知足什麼條件被記錄時,將變得比較困難。
(5)LEN、DPT標誌同時出如今IP頭、TCP頭中在分析處理日誌時容易出現混亂。學習
3、日誌分析大數據
在Linux下單獨記錄Iptables的方法是編輯/etc/syslog.conf文件,在其中加入一行
kern.warning /var/log/iptables.log
而後重啓syslog服務:代理
爲了方便地對日誌進行分析,可加上適當的記錄日誌前綴,即在IPtables中使用LOG選項,經過LOG 選項打開匹配數據包的內核記錄功能。LOG 選項的子選項 --log-prefix 用來給記錄信息添加一個消息前綴,這個前綴可設達 29 個字符。添加前綴的目的只是爲了更好的辨別記錄信息,好比更容易用 grep 這種工具過濾出匹配的記錄信息。下面舉個例子。在Linux 服務器中輸入下面的命令:
wKiom1Sg8uSj4X_9AADLlsXyfrM150.jpg
接下來查看iptables.log日誌文件中加HACKERS前綴的日誌,固然你也能夠換成其餘內容。
wKioL1Sg86HAbjzpAAF825kGXRg718.jpgrest
參數「-j LOG」用於設定日誌級別,利用 syslog 把特殊級別的信息放入指定日誌文件。初始存放在/var/log/messages裏面,因爲存放messages中,對於分析日誌產生不便。這裏簡單介紹一個iptables日誌的管理、循環和自動報告生成的實例。
幾乎全部的Linux發行版都默認安裝了iptables,由dmesg或syslogd的facility結合內核管理。iptables的日誌的初始值是[warn(=4)],若須要修改這個初始值就須要編輯syslog.conf。
/etc/logrotate.conf的初始設置是每週進行日誌循環。因此每週的日誌將被存在 /var/log/iptables.log中,之前的日誌將被順次存儲在iptableslog.1~ iptables-log.50 中。
另外一種方法就是經過iptables直接獲取日誌,操做以下:日誌
\*保存從eth0 進入的packet記錄;
\*廢除從eth0進入的packet記錄;
通過上面兩條命令操做以後/var/log/iptables-log.1的內容將以下所示:
Sep 2310:16:14 hostname kernel: iptables icmp-localhost IN=lo OUT=MAC=00:00:00:00:00:00:00:00:00:00:00:00:08:00 SRC=127.0.0.1 DST=127.0.0.1LEN=84 TOS=0x00 PREC=0x00 TTL=64 ID=0 DF PROTO=ICMP TYPE=8 CODE=0 ID=57148SEQ=256
上面這種方法比較麻煩,下面用ulog工具可以使用netlink直接將日誌廣播到用戶態,這樣以來效率更高,首先安裝ulog包,命令以下:
查看Iptables日誌,如圖1所示。
wKiom1Sg8vjQL9HeAAiVN4xqOWU179.jpg
圖1 用ulog查看Iptables日誌
4、圖形化分析工具
瞭解日誌構成和結構、含義是基礎,但大數據下的「大安全時代」必須使用工具軟件協助你完成任務,下面筆者推薦幾款圖形化分析工具。
1)OSSIM
在OSSIM USM 版本能夠對各類日誌進行歸一化處理並以圖表的方式展示出來,如圖2所示。
wKiom1Sg83CwGGRGAAUm2RpDWLk701.jpg
圖2 OSSIM日誌收集
2) FirewallAnalyzer
Firewall Analyzer是一套基於Web,無需安裝代理的防火牆日誌分析系統,該系統可支持網絡中的多款防火牆設備,並實現監視、日誌蒐集和分析、並以報表的形式將其呈現出來。利用Firewall Analyzer,網絡安全管理員,能夠快速的獲取網絡頻寬佔用,以及安全時間等重要信息,從而更加有效地對網絡實施管理。通常來講,能夠獲取到的安全事件信息包括:入侵檢測、病毒攻擊、拒絕服務攻擊等異常的網絡行爲。Firewall Analyzer能分析Cisco PIX、ASA,CheckPoint等多種防火牆日誌。如圖3所示,爲Firewall Analyzer流量分析界面。
wKiom1Sg83vx-bxDAAX4lKOYZjU001.jpg
圖3 Firewall Analyzer 日誌分析主界面
3)Sawmill
Sawmill適用於Unix/Linux和Windows等多種平臺,支持900 種日誌格式,集中式且跨平臺的日誌報表管理系統,能集中搜集日誌,併產生中文報表(包含體簡體及繁體中文),簡約的操做界面讓使用者能直覺地透過簡單的點擊操做,可以輕鬆分析Netfilter日誌,快速分析並定製報表,如圖四、5所示。
wKiom1Sg84jyvd3qAAHVXGc6PSA630.jpg
圖4 設定讀取數據源
wKioL1Sg9ETTQEZBAAL1H7Ve-pQ094.jpg
圖5設定輸出報表
wKioL1SvdViwPyWKAAdTRltl6nM946.jpg
4.Splunk
Splunk是一款強大的日誌分析工具,使用 Splunk 可收集、索引和利用全部應用程序、服務器和設備(物理、虛擬和雲中)生成的快速移動型計算機數據 ,用它分析iptables日誌,如圖6所示,是否是和OSSIM的圖形化輸出有些類似?
wKioL1Svb9SzvSMyAAbrWEfoo14891.jpg圖6
5.logstash
Logstash是一個開源工具,它能夠對你的日誌進行收集、簡單分析,咱們看看下面這段原始日誌,我經過一個實驗來講明logstash是如何經過圖形化方式展現給用戶的。
wKiom1VEQDKSlpy7AAGypNinLcc378.jpg
wKioL1VEQamCpiZoAARbBDmTb0c496.jpg
總之,開源工具學習成本高,對初學者難度大,而商業工具可讓你省心,須要一筆不菲的開銷的同時,還少了一些研究開源軟件的成就感。
有關日誌分析的更多內容你們能夠參考《UNIX/Linux網絡日誌分析與流量監控》一書。