Scrapy介紹

在爬蟲技術中，我們使用 Requests 和 Selenium 可以解決80%的需求，那麼爲什麼我們還需要學習 Scrapy 框架呢？因爲它可以使我們的爬蟲更快、更強。 Scrapy 的基本概念 我們來看下官方文檔的定義： Scrapy是一個爲了爬取網站數據，提取結構性數據而編寫的應用框架。 可以應用在包括數據挖掘，信息處理或存儲歷史數據等一系列的程序中。 其最初是爲了 頁面抓取 (更確切來說,

>>阅读原文<<