常見python爬蟲框架

1、python爬蟲框架    一些爬蟲項目的半成品 2、常見python爬蟲框架   (1)Scrapy:很強大的爬蟲框架，能夠知足簡單的頁面爬取（好比能夠明確獲知url pattern的狀況）。用這個框架能夠輕鬆爬下來如亞馬遜商品信息之類的數據。可是對於稍微複雜一點的頁面，如weibo的頁面信息，這個框架就知足不了需求了。   (2)Crawley: 高速爬取對應網站的內容，支持關係和非關係數

>>阅读原文<<