Python爬蟲開源項目合集

　　scrapy - 最出名的網絡爬蟲，一個快速,高層次的屏幕抓取和web抓取框架，用於抓取web站點並從頁面中提取結構化的數據。Scrapy用途廣泛，可以用於數據挖掘、監測和自動化測試。官方主頁,Scrapy 輕鬆定製網絡爬蟲 - 教程，Scrapy 中文指南 。 　　項目地址： 　　https://github.com/scrapy/scrapy/ 　　BeautifulSoup - Beau

>>阅读原文<<