scrapy修改源碼生成Pipelines文件

需求分析: 1、當我們編寫的爬蟲量非常大時,而且他們都具有特定的規律,每次我們都需要複製相同的pipelines元素,或者其他重複的工作,那麼我們就可以通過修改scrapy源碼中的template模板,讓他創建時自動生成你需要的Pipelines文件格式,簡化工作 class ExcelPipeline(object): def __init__(self): self.w
相關文章
相關標籤/搜索