scrapy源碼分析_初始化及settings

研究背景 我在開發scrapy爬蟲的時候，想讓scrpy啓動的時候直接指向一個配置文件, 即，我開啓的時候用下面語句，則爬蟲服務會加載上mysettings.py中的內容,這個內容可能會寫 pipline,mysql路徑之類的,方便不一樣的環境，也方便不一樣的 spider(指單個爬蟲任務)mysql scrapy crawl TestMReview -a settingpath=/home/a

>>阅读原文<<