Python爬蟲基本流程

爬蟲定義 爬蟲是請求網站並提取自己所需要數據的過程。通過我們的程序，可以代替我們向服務器發送請求，然後進行批量的數據下載。   爬蟲基本流程 發起請求 通過url向服務器發送requests請求，請求可以包含額外的header信息。 2.獲取響應內容 如果服務器正常響應，那麼將受到一個response，response即爲我們所請求的網頁內容，可能包含htmljson二進制數據(圖片、視頻)等。

>>阅读原文<<