手把手教你寫網絡爬蟲（2）：迷你爬蟲架構

介紹 大家好！回顧上一期，我們在介紹了爬蟲的基本概念之後，就利用各種工具橫衝直撞的完成了一個小爬蟲，目的就是猛、糙、快，方便初學者上手，建立信心。對於有一定基礎的讀者，請不要着急，以後我們會學習主流的開源框架，打造出一個強大專業的爬蟲系統！不過在此之前，要繼續打好基礎，本期我們先介紹爬蟲的種類，然後選取最典型的通用網絡爬蟲，爲其設計一個迷你框架。有了自己對框架的思考後，再學習複雜的開源框架就有頭緒

>>阅读原文<<