Python爬蟲學習 9 —— scrapy爬蟲框架

  Scray是一個功能強大且很是快速的爬蟲框架，具體學習它的基本使用。python 1、scrapy介紹 scrapy：它是一個爬蟲框架結構，它包含了五個模塊和兩條之間線路： 主要模塊：程序員 模塊 描述 SPIDERS 發送請求，處理響應，須要用戶本身編寫（配置） ENGINE 接受request請求並大宋到SCHEDULER模塊 SCHEDULER 調度請求，向ENGINE發送真實的請求 D

>>阅读原文<<