爬蟲框架 scrapy 的簡單介紹 以及 安裝和簡單使用

scrapy是什麼？         它是Python的一個爬蟲框架，非常出名、非常強悍，因爲是框架，所以需要學習的就是框架的用法，當然，它的底層肯定使用了多進程、多線程、隊列等技術。         scrapy框架由五部分組成，包括：引擎、下載器、spiders、調度器（schedule）、管道（pipeline）,一般我們進行爬蟲實現的代碼寫到spiders、管道中，在spiders裏面我們

>>阅读原文<<