Python 實戰:用 Scrapyd 打造爬蟲控制檯

爬蟲本地直接跑還是部署到服務器跑？ 有天，老闆安排小黃一個任務，要求獲取某體育賽事網站上所有足球聯賽及球隊的信息數據，並存入數據庫中爲後續的數據分析和計算做準備。因爲這類信息更新頻率比較低，所以隔十幾天啓動一次是沒什麼問題的，用 requests 就搞定了。又過了幾天，老闆跟你說，要求每天24小時不間斷採集賽事信息，於是你把腳本寫成了服務放在服務器運行。又過了一段時間，老闆說：我們要將上個百主流體

>>阅读原文<<