如何讓你寫的爬蟲速度像坐火箭同樣快【併發請求】

話很少說，咱們正式開始。在提高爬蟲的速度這方面，最基礎、最有效、最直接的操做是什麼呢？沒錯，就是併發請求，若是你的爬蟲整個邏輯是順序執行的，請求的時候永遠不會併發，那麼你就會遇到像他這樣的狀況：《小白寫了個壁紙的爬蟲，能跑起來，可是感受很慢，不知道怎麼回事，請大佬指點》。 python 上面這是我昨天刷V2的時候看到的一個帖子，樓主的代碼內容簡單歸納一下就徹底是順序執行的，每下載一個圖片都須要等待

>>阅读原文<<