python——爬蟲學習——Scrapy爬蟲框架入門-(6)

Scrapy，Python開發的一個快速,高層次的屏幕抓取和web抓取框架，用於抓取web站點並從頁面中提取結構化的數據。Scrapy用途普遍，能夠用於數據挖掘、監測和自動化測試。python 1、」5+2」結構 1.Engine(引擎) 控制全部模塊之間的數據流，根據條件觸發事件 不須要用戶修改web 2.Downloader(下載器) 根據請求下載網頁 不須要用戶修改shell 3.Sched

>>阅读原文<<