01 爬蟲的基本概念

爬蟲  網絡爬蟲(又被稱爲網頁蜘蛛, 網絡機器人)就是模擬客戶端發送網絡請求,接收請求響應,一種按照一定的規則,自動地抓取互聯網信息的程序.   原則上,只要是瀏覽器能做的事情,爬蟲都能做. 爬蟲基本概念 爬蟲能做什麼 搜索引擎 購票 搶票 網絡投票 短信轟炸   爬蟲的數據來源： 去第三方的公司購買數據(比如企查查) 去免費的數據網站下載數據(比如國家統計局) 通過爬蟲爬取數據 人工收集數據(比

>>阅读原文<<