今天開始學爬蟲

簡述基礎知識 什麼是爬蟲 模擬瀏覽器自動請求網頁，而後按必定規則提取有價值的返回數據。 爬蟲類型 1. 通用爬蟲： 搜索引擎重要的組成部分，將網頁數據無差異下載到本地，造成一個互聯網內容的鏡像備份。 2. 聚焦爬蟲： 面向特定需求的網絡爬蟲，與通用爬蟲不一樣的是，在請求和抓取數據的時候會進行內容上的篩選，只提取與本身需求相關的網頁信息 爲何爬蟲通常都使用Python 1. php 主要用戶網頁開

>>阅读原文<<