高級Python網絡爬蟲使用技術選擇指南

一 相關背景 網絡爬蟲(Web Spider)又稱網絡蜘蛛、網絡機器人，是一段用來自動化採集網站數據的程序。如果把互聯網比喻成一個蜘蛛網，那麼Spider就是在網上爬來爬去的蜘蛛。網絡爬蟲不僅能夠爲搜索引擎採集網絡信息，而且還可以作爲定向信息採集器，定向採集某些網站下的特定信息，如：汽車票價，招聘信息，租房信息，微博評論等。 二 應用場景 圖1 應用場景 爬蟲技術在科學研究、Web安全、產品研發、

>>阅读原文<<