【爬蟲框架-scrapy】scrapy使用

scrapy框架 scrapy-項目和爬蟲的創建 1.項目的創建scrapy startproject 項目名 2.爬蟲的創建scrapy genspider 爬蟲名 目標的主域名(進入項目文件夾後執行) 創建好的scrapy項目文件夾如下: 3.項目文件夾的介紹 scrapy-爬蟲的編寫 scrapy的運行過程 爬蟲文件(請求的數據) → 引擎 → 調度器(對請求的數據入隊) → 引擎 →下載器

>>阅读原文<<