Python網絡爬蟲與信息提取（8）—— scrapy框架基礎知識

前言 Scrapy爬蟲框架結構 爬蟲框架是實現爬蟲功能的一個軟件結構和功能組件集合 爬蟲框架是一個半成品，能夠幫助用戶實現專業的網絡爬蟲 約束了用戶使用的模板 5+2結構 5表示的是SPIDERS、ENGINE、ITEM PIPELINES、DOWNLOADER、SCHEDULER這五個模塊 2表示SPIDERS與ENGINE鏈接的中間鍵和ENGINE與DOWNLOADER鏈接的中間鍵 三條主要數

>>阅读原文<<