菜鳥都能看懂的爬蟲Scrapy入門指南

爬蟲，就是抓取網絡數據的小腳本，把訪問資源，獲取數據，入庫保存這一過程自動化的工具。 「掛機神器」按鍵精靈，「搶課神器」Selenium都可以是很好的爬蟲工具，想必大家對這兩者已經是比較熟悉了。 但是在生產工作中，大部分情況下，使用前述兩種工具雖然能獲取數據，但是對於服務器資源的開銷比較大，且效率通常達不到要求。究其原因，這兩個工具在獲得相應數據之後還需要渲染展示，這個環節會造成額外的資源開銷。因

>>阅读原文<<