爬蟲的常見陷阱以及Java的爬蟲思路

前言 本文是這篇文章《Java實現爬蟲給App提供數據（Jsoup 網絡爬蟲）》 http://blog.csdn.net/never_cxb/article/details/50524571 的衍生。當時面阿里的時候，聊到我作新聞 App 的時候，使用 Jsoup 爬蟲，面試官隨即問我對爬蟲瞭解多深。因此稍微深刻了解爬蟲底層原理，後期打算看一下 Jsoup 底層實現。html 筆者作的爬蟲側重於

>>阅读原文<<