爬蟲-timeout機制-避免網頁假死 長時間不加載

爬蟲有時候會由於爬去某些網頁速度極慢，影響性能。全部能夠設置超時時間。  timeout單位 秒  設置超時時間爲12，使用try語句。python #coding:utf-8 **urllib2** 超時能夠經過 urllib2.urlopen() 的 timeout 參數直接設置。 例如: #coding:utf-8 import urllib2 try: url = "http://

>>阅读原文<<