爬蟲框架概述

綜述 爬蟲入門之後，我們有兩條路可以走。 一個是繼續深入學習，以及關於設計模式的一些知識，強化Python相關知識，自己動手造輪子，繼續爲自己的爬蟲增加分佈式，多線程等功能擴展。另一條路便是學習一些優秀的框架，先把這些框架用熟，可以確保能夠應付一些基本的爬蟲任務，也就是所謂的解決溫飽問題，然後再深入學習它的源碼等知識，進一步強化。 就個人而言，前一種方法其實就是自己動手造輪子，前人其實已經有了一些

>>阅读原文<<