scrapy爬蟲框架之理解篇

提問： 爲什麼使用scrapy框架來寫爬蟲 ？            在python爬蟲中：requests  +  selenium  可以解決目前90%的爬蟲需求，難道scrapy 是解決剩下的10%的嗎？顯然不是。scrapy框架是爲了讓我們的爬蟲更強大、更高效。接下來我們一起學習一下它吧。     1.scrapy 的基礎概念： 　　scrapy 是一個爲了爬取網站數據，提取結構性數據而編

>>阅读原文<<