requests+asyncio實現異步抓取網頁

之前寫一個抓取某圖片網站的圖片的Python腳本，覺得下載了太慢，就考慮使用多線程實現，下面記錄下實現思路。 使用的是Python包：requests+asyncio+Beautifulsoop。沒有使用scrapy，雖然它確實很強大，但是感覺還是有太多的侷限，requests雖然不能像scrapy一樣能夠自動解析，但是和Beatifulsoop一起使用，功能還是可以的。 這個任務是這樣滴： 要抓

>>阅读原文<<