【python】批量驗證網站CMS類型

CMS識別方式 頁面關鍵詞驗證     比如我打開www。langzi。fun這個網站，返回的頁面源代碼裏面有個關鍵詞，根據字典判斷是hexo搭建的網站，於是把www。langzi。fun保存在文件夾下的hexo.txt文本中。比如字典     判斷鍵值是否在返回的頁面內容中，如果匹配成功則寫入本地。 robots.txt文件內容識別     很多網站的robots文件中都有該網站CMS的關鍵詞，

>>阅读原文<<