Scrapy爬取銀行理財產品信息（共12多萬條）並存入MongoDB

本次Scrapy爬蟲的目標是爬取「融360」網站上全部銀行理財產品的信息，並存入MongoDB中。網頁的截圖以下，所有數據共12多萬條。ide 咱們再也不過多介紹Scrapy的建立和運行，只給出相關的代碼。關於Scrapy的建立和運行網站 修改items.py，代碼以下，用來儲存每一個理財產品的相關信息，如產品名稱，發行銀行等。blog 建立爬蟲文件bankSpider.py，代碼以下，用來爬取網

>>阅读原文<<