Scrapy爬取伯樂在線採用兩種入庫方法

scrapy基本命令 1.建立scrapy項目 scrapy startproject mybole 2.進入項目列表並在項目目錄下創建爬蟲文件,此處必須加上你要爬取的鏈接否則會報錯 cd mybole scrapy genspider jobbole jobbole.com 3.在你創建的scrapy列表中找到spiders就是你創建的爬蟲文件夾jobbole.py 4.初始化的爬蟲代碼scra

>>阅读原文<<