scrapy爬取京東商城某一類商品的信息和評論（一）

剛寫完京東爬蟲，趁着記憶還深入，寫點總結吧。python 1、前提git 默認已用scrapy爬取過網站，有爬蟲基礎，有爬蟲環境github 2、以爬取電子煙爲例chrome 一、任務一：爬取商品信息數據庫 在搜索框裏面直接搜索電子煙，搜出來的界面，你會發現它是動態加載的。即一開始源代碼裏面只能看到30條商品的信息，隨着你的下拉，另外30條纔會加載出來。所以爬取起來比較麻煩。後來發現，從京東左邊的

>>阅读原文<<