一文搞定scrapy爬取衆多知名技術博客文章保存到本地數據庫，包含：cnblog、csdn、51cto、itpub、jobbole、oschina等...

本文旨在經過爬取一系列博客網站技術文章的實踐，介紹一下scrapy這個python語言中強大的整站爬蟲框架的使用。各位童鞋可不要用來幹壞事哦，這些技術博客平臺也是爲了讓咱們你們更方便的交流、學習、提升的，你們千萬要珍惜哦(-_-)。html 本文目錄： 0、開發環境 一、目標介紹 二、爬取目標 2.一、csdn博客 2.1.1 如何判斷是否爲Ajax方式異步獲取的？ 2.1.2 爬蟲實現 2.1.

>>阅读原文<<