使用nodejs 爬蟲框架 Crawler爬取全國省市區的數據

node-crawler 是nodejs 的爬蟲框架。 默認使用Cheerio進行jquery式DOM解析,更方便的抓取網頁的特定部分。 更多特性和功能 crawler中文文檔javascript 爬取全國的省市區的數據 國家統計局的統計的數據網站 分析網頁的結構。 入口網址是index.html,列出了省份和直轄市 點擊省份會跳到下級市的網站,網址爲對應的a的href替換掉index 以此類推
相關文章
相關標籤/搜索