瞭解爬蟲，這一篇就夠了！

爬蟲基本原理 爬蟲的基本原理是基於網站網絡協議，根據網址批量獲取到網頁上的信息操作過程。簡單一點說就是用計算機程序來模擬人工點擊網頁獲取數據的過程。 本教程將通過網絡協議介紹、http請求流程、網頁中的請求與返回、爬蟲工作過程來爲大家詳細介紹爬蟲是如何展開工作的。 網絡協議 我們經常會在URL的首部會看到http或者https，這個就是訪問資源需要的協議類型，爬蟲常用的是http和https協議。

>>阅读原文<<