超簡單的付費代理池監控清洗器，自動維護ip池

開發一個超簡單的付費代理池監控維護器 爬蟲經常會用到代理ip，其中有很多收費ip，但是如何在scrapy中，高效使用這些ip是一個比較麻煩的事情，在這裏基於芝麻代理ip做一個代理池監控器，首先整理我們的需求 整理需求 芝麻付費代理 取ip是不要錢，只有使用才收費，針對這個特點，可以讓我們代理池24小時始終保持指定數量的ip即使沒有使用 需要監控ip是否過期，如果已經過期就從池中刪除 監控訪問目標網

>>阅读原文<<