基於WebMagic寫的一個csdn博客小爬蟲

最近有點無聊，想研究一下爬蟲，說到爬蟲，不少人第一時間想到的是python。可是此次我選擇了室友@antgan推薦的java爬蟲框架WebMagic。該框架容易上手，可定製可擴展，很是適合想用java作爬蟲的小夥伴們。先看一下官方教程，裏面寫得很詳細，也有很多參考案例。html 暫時還想不到有什麼數據值得爬取，先拿csdn博客來練練手。 小爬蟲能抓取指定用戶的全部文章的關鍵信息，包括文章id，標題

>>阅读原文<<