爬蟲爲什麼用python

爬蟲爲什麼用python: 因爲爬蟲用python寫有多個優點： 1.各種爬蟲框架，方便高效的下載網頁; 2.多線程、進程模型成熟穩定，爬蟲是一個典型的多任務處理場景，請求頁面時會有較長的延遲，總體來說更多的是等待。多線程或進程會更優化程序效率，提升整個系統下載和分析能力。 3.GAE 的支持，當初寫爬蟲的時候剛剛有 GAE，而且只支持 Python ，利用 GAE 創建的爬蟲幾乎免費，最多的時候

>>阅读原文<<