Scrapyd監控系統之SpiderKeeper和Scrapydweb詳解

♚ zarten,互聯網一線工做者。css 博客地址:zhihu.com/people/zartennode 概述nginx 咱們的scrapy爬蟲項目能夠部署在scrapyd服務器中,能夠經過scrapyd提供的接口訪問web主頁,但這個頁面比較簡陋且一臺scrapyd服務器提供一個主頁,若多臺的話,就要訪問多個主頁,這樣會比較麻煩。git 有沒有開源的庫能夠統一管理,實現一鍵部署,定時任務等功
相關文章
相關標籤/搜索