Python爬蟲之異常重試的解決方案詳解

你們在作數據抓取的時候,常常遇到因爲網絡問題致使的程序保存,先前只是記錄了錯誤內容,並對錯誤內容進行後期處理。python 原先的流程:算法 def crawl_page(url): pass def log_error(url): pass url = "" try: crawl_page(url) except: log_error(url) 改進後的流程:網絡 attempt
相關文章
相關標籤/搜索