03-python爬蟲基本原理

爬蟲是 模擬用戶在瀏覽器或者某個應用上的操作，把操作的過程、實現自動化的程序 當我們在瀏覽器中輸入一個url後回車，後臺會發生什麼？比如說你輸入http://www.sina.com.cn/   簡單來說這段過程發生了以下四個步驟： 查找域名對應的IP地址。 向IP對應的服務器發送請求。 服務器響應請求，發回網頁內容。 瀏覽器解析網頁內容。   網絡爬蟲本質 本質就是瀏覽器http請求 瀏覽器和網

>>阅读原文<<