python爬蟲基礎知識整理

本文主要記錄python爬蟲的基礎知識點，主要知識：理論基礎、爬蟲技能簡述、實現原理和技術、uillib庫和urlerror、headers屬性和代理服務器設置。html 1）理論基礎部分python 網絡爬蟲又稱網絡蜘蛛、網絡螞蟻、網絡機器人等，能夠按照咱們設置的規則自動化爬取網絡上的信息，這些規則被稱爲爬蟲算法。linux 2）爬蟲的組成有控制節點、爬蟲節點和資源庫算法 我的簡單理解就是控制節

>>阅读原文<<