[工具&筆記]scrapy相關和docker部分

示例:architecture_spider Scrapy 相關 參考scrapy文檔,scrapyd文檔 scrapy的架構非常清晰。 scrapy的架構 一般一個非常簡單的爬蟲,只需要創建一個Spider,定義一個Item,加上部分setting即可。如果對結果存儲有要求,那就加一個ItemPipe。 scrapy命令分在項目內和項目外兩部分,如何區分是否在項目內,只需要在命令行看輸出即可知道
相關文章
相關標籤/搜索