白話Scrapy框架

白話Scrapy框架 框架組成 引擎 它就是整個爬蟲框架的大腦，負責指揮，實現信號、數據在不同組成部分之間的傳遞 調度器 它是一個隊列，一個存放request請求的隊列，所有由引擎發過來的request，都會在調度器這裏排好隊，等着下一步的處理 下載器 將引擎交付過來的request指令完成，得到response，並返回給引擎 爬蟲 此時說的爬蟲更像是一個軍師，它根本沒有盡到一個爬蟲的義務——爬出

>>阅读原文<<