關於python爬蟲的學習總結

爬蟲的五個步驟 明確需求,想想爬什麼數據 確定含有需要數據的網站 分析請求類別,請求時所攜帶的參數,模擬發送請求 下載頁面,分析頁面,通過re,xpath來過濾response中返回的數據 將數據儲存起來 正則表達式 正則表達式的定義 描述了一種字符串的匹配模式,可以用來檢查一個串是否含有某種字串,見匹配到的字串替換成其他的字符或者取出 應用場景 測試字符串的是否符合某個模式 批量替換文本中符合某

>>阅读原文<<