爬蟲知識1：瞭解爬蟲知識體系、安裝Scrapy等模塊

1、爬蟲的知識介紹及相關概念     網絡爬蟲（又被稱爲網頁蜘蛛，網絡機器人，在FOAF社區中間，更經常的稱爲網頁追逐者），是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本。另外一些不常使用的名字還有螞蟻、自動索引、模擬程序或者蠕蟲。通過爬蟲爬取數據後，你就可以做一些數據分析、展示等工作。 1）知識圖譜     要掌握爬蟲，除了一些python中一些基礎的語法、函數、模塊、面向對象等知識，

>>阅读原文<<