爬蟲速度太慢用異步協程提速

1. 前言 在執行一些 IO 密集型任務的時候，程序經常會由於等待 IO 而阻塞。好比在網絡爬蟲中，若是咱們使用 requests 庫來進行請求的話，若是網站響應速度過慢，程序一直在等待網站響應，最後致使其爬取效率是很是很是低的。html 爲了解決這類問題，本文就來探討一下 Python 中異步協程來加速的方法，此種方法對於 IO 密集型任務很是有效。如將其應用到網絡爬蟲中，爬取效率甚至能夠成百倍

>>阅读原文<<