requests+asyncio實現異步抓取網頁

以前寫一個抓取某圖片網站的圖片的Python腳本，以爲下載了太慢，就考慮使用多線程實現，下面記錄下實現思路。html 使用的是Python包：requests+asyncio+Beautifulsoop。沒有使用scrapy，雖然它確實很強大，可是感受仍是有太多的侷限，requests雖然不能像scrapy同樣可以自動解析，可是和Beatifulsoop一塊兒使用，功能仍是能夠的。 這個任務是這樣

>>阅读原文<<