一隻健壯的爬蟲是怎樣煉成的

一隻健壯的爬蟲是怎樣煉成的 Python新人,爬蟲玩的多了,漸漸的也有了自己的一些感悟,這裏不談具體操作,就寫了幾條自己的總結,每一條背後都是失敗的經驗教訓,當你把爬蟲「放心」的運行一晚上後,一大早起來發現程序早就異常死掉了,很多都沒爬到時,你就知道下面這些建議的意義了。 1.爬蟲必須增加容錯處理,不能因爲一個錯誤就終止整個程序; 2.重要的內容請時刻保存爲文件,防止程序異常終止時,丟失所有已爬取
相關文章
相關標籤/搜索