論壇圖片爬蟲的一種實現

  1背景 經常上貼圖的論壇（Discuz!），每次打開帖子的時候，由於帖子的圖片太多，每次都要等不少時間才能看到所有的圖片，比較麻煩；同時經常會打開看過的帖子。爲了解決這個問題，寫了個小爬蟲，定期把最新的帖子中的圖片下載到本地。   2目標 自動登錄、智能發現爲抓取的帖子、智能提取圖片URL、多線程下載到本地。   3整體流程圖      4，使用到的工具和軟件 VisualSVN Server

>>阅读原文<<