自己動手寫開源爬蟲框架 Slit

自己寫的一個開源爬蟲框架，取名爲Slit。現在的爬蟲框架確實有很多，例如Nutch,Heritrix,webMagic等等我爲什麼又要自己寫一個呢？這幾個爬蟲框架確實都不錯，網上也有很多關於它們的評價，但是我發現它們中有很多功能我用不到，有些地方擴展性有點限制，然後自己一想搞個適合自己的輕框架，於是準備這個練手的項目Slit。   下面我對Slit項目做一些基本的介紹，包括項目的架構，內部運行邏輯

>>阅读原文<<