一篇文章帶你理解Scrapy框架

首先，什麼是Scrapy框架? Scrapy是一個快速、高層次、輕量級的屏幕抓取和web抓取的python爬蟲框架 那什麼是爬蟲框架呢？ 爬蟲框架是實現爬蟲功能的一個軟件結構和功能組件集合；爬蟲框架是一個半成品， 能夠幫助用戶實現專業網絡爬蟲。 Scrapy框架圖如下： 先來看看Scrapy的5+2結構（五個主體+兩個中間件）： Scrapy Engine(引擎): 負責Spider、ItemPi

>>阅读原文<<