文章來源:http://danqingdani.blog.163.com/blog/static/1860941952014101723845500/git
本篇文章從WAF產品研發的角度來YY如何實現一款可靠的WAF,靈感來自ModSecurity等,感謝開源。github
本片文章包括三個主題
(1) WAF實現
WAF包括哪些組件,這些組件如何交互來實現WAF防護功能
(2)WAF規則(策略)維護
規則(策略)如何維護,包括獲取渠道,規則測試方法以及上線效果評測
(3) WAF支撐
WAF產品的完善須要哪些信息庫的支撐
1、WAF實現
WAF一句話描述,就是
解析HTTP請求(協議解析模塊),規則檢測(規則模塊),作不一樣的防護動做(動做模塊),並將防護過程(日誌模塊)記錄下來。
無論硬件款,軟件款,雲款,核心都是這個,而接下來圍繞這句話來YY WAF的實現。
WAF的實現由五個模塊(配置模塊、協議解析模塊、規則模塊、動做模塊、錯誤處理模塊)組成
1. 配置模塊
設置WAF的檢測粒度,按需開啓,如圖所示
2. 協議解析模塊(重點)
協議解析的輸出就是下一個模塊規則檢測時的操做對象,解析的粒度直接影響WAF防護效果。對於將WAF模塊寄生於web 服務器的雲WAF模式,通常依賴於web 服務器的解析能力。
3. 規則模塊(重點)
重點來了,這塊是WAF的核心,我將這塊又細分爲三個子模塊
(1) 規則配置模塊
IP黑白名單配置、 URL黑白名單配置、以及挑選合適的規則套餐
(2)規則解析模塊
主要做用是解析具體的規則文件,規則最好採用統一的規則描述語言,便於提供給第三方定製規則,ModSecurity這方面作得很是優秀。
規則文件由四部分組成,分爲變量部分、操做符部分,事務函數部分與動做部分
(3)規則檢測模塊
上一步咱們設置了各類變量,接下來就是按照必定的邏輯()來作加減乘除了
4. 動做模塊(重點)
經過規則檢測模塊,咱們識別了請求的好惡,接下來就是作出響應,量刑處理,不單單是攔截
5. 日誌模塊(重點)
日誌處理,很是重要,也很是火熱,內容豐富到徹底能夠從WAF獨立出來造成單獨的安全產品(e.g.日誌寶)而採用提供接口的方式來支撐WAF。對於數據量巨大的雲WAF,都會有單獨的大數據團隊來支撐架構這一塊,包括數據存儲(e.g. hdfs) ,數據傳輸(kafka),數據離線分析(hadoop/spark),數據實時分析(storm),數據關聯分析(elasticsearch)等等,之後另開一篇單獨說明。
6. 錯誤處理模塊
以上模塊運行錯誤時的異常處理
2、WAF規則(策略)維護
WAF須要修煉一圖以蔽之
3、WAF支撐信息庫
WAF須要修煉一圖以蔽之
以上支撐庫幾乎全部的安全人員都在重複地作,而資源沒有共享的緣由,一是內部不可說,二是沒有采起統一的描述語言沒法匯合,唉,安全從業人員的巴別塔。
4、補充知識(包括文章與代碼)
想一想寫了這麼多文章,自我感受萌萌噠
WAF相關
ModSecurity相關文章(我就是ModSecurity的死忠粉)
指紋識別
IP相關
CDN架構
正則優化
HTTP發包工具
參考:
第8、9、十,十一我是反覆看,每次都有新的靈感,第1四、15章是當成新華字典看的,以避免遺忘。