scrapy學習筆記(雜1)

Scrapy 流程: 模塊功能:         處理大型爬蟲中來自不同的網站的數據: 首先定義不同的爬蟲Spider1,spider2,spider3…不同爬蟲中具有自身屬性 class TestSpider(scrapy.Spider):     name = 'test'     allowed_domains = ['test.com']     start_urls = ['http:/
相關文章
相關標籤/搜索