python爬蟲 案例

1.網絡爬蟲的一些概述過程 正常的瀏覽器瀏覽網頁過程是： 1.發起Http請求，服務器收到後，返回html代碼。 2.瀏覽器解析html代碼，將相應的節點效果展示在UI上，需要下載的二級資源瀏覽器會去下載。 爬蟲： 1.僞裝瀏覽器（headers-User-Agent） 2.訪問網站，獲得服務器返回的html數據（注意：控制訪問的頻率，如果訪問網頁過多可能會封IP） ---------------

>>阅读原文<<