簡單瞭解python爬蟲

簡單瞭解python爬蟲 1、什麼是爬蟲 1.1爬蟲Spider的概念 爬蟲用於爬取數據，又稱之爲數據採集程序。 爬取的數據來源於網絡，網絡中的數據能夠是由Web服務器(Nginx/Apache)、數據庫服務器(MySQL、Redis)、索引庫(ElastichSearch) 、大數據(Hbase/Hive)、視頻/圖片庫(FTP)、雲存儲等(OSS)提供的。 爬取的數據是公開的、非盈利的。 1.

>>阅读原文<<