基於asyncio、aiohttp、xpath的異步爬蟲

今天介紹一下基於asyncio和aiohttp的異步爬蟲的編寫，解析html用的是xpath。html 該爬蟲實現瞭如下功能: 1.讀取csv文件中的爬取規則，根據規則爬取數據；代碼中添加了對3個網站的不一樣提取規則，若有須要，還能夠繼續添加； 2.將爬取到的數據保存到mysql數據庫中。前端 經過輸入問題，該爬蟲能爬取關於健康方面的數據。mysql 具體代碼以下:sql # coding:utf

>>阅读原文<<