scrapy爬蟲

       感覺現在爬蟲很火，搜索有關於python類容總是彈出關於爬蟲的信息，我也感覺爬蟲這個東西很有意思所有花了一點時間來學習爬蟲，現在簡單的記錄一下爬蟲的環境安裝，爬蟲爬取過程，靜態頁面爬取案例，動態加載頁面爬取，存儲數據庫。使用scrapy框架來爬取數據會很簡潔，也比較易學，我使用的是scrapy框架爬取數據。 1.環境配置 （1）安裝python3.4，3.5，3.6都行，（2）安裝s

>>阅读原文<<