pyspider爬取v2Ex網的python帖子

什麼是pyspider 一個國人編寫的強大的網絡爬蟲系統並帶有強大的WebUI。採用Python語言編寫，分佈式架構，支持多種數據庫後端，強大的WebUI支持腳本編輯器，任務監視器，項目管理器以及結果查看器 爬取目標 爬取每篇帖子的url,author,和title 爬取流程 在命令行運行pyspider，並能在網頁端打開 2. 新建項目，命名爲v2ex ,url爲http://www.v2ex.

>>阅读原文<<