利用node.js寫爬蟲 爬取某相親網站全部交友信息

利用node.js,寫了一個爬蟲js。1個小時左右的時間,便爬取了2000多條交友信息,包括網名,年齡,圖片,學歷,工資等。當然,爬取的速度和網速有很大的關係,也和你要爬取的網站響應的速度有關。先看一下,爬取的成果(涉及隱私,面部全部打上馬賽克) 說一下思路和代碼流程: 首先require引入http(如果爬取的網站是https安全模式的話,引入https),fs,  path 。代碼如下: va
相關文章
相關標籤/搜索