開源爬蟲框架各有什麼優缺點

https://blog.csdn.net/CSDN_AF/article/details/70888852 開源爬蟲框架各有什麼優缺點？ 作者：老夏 開發網絡爬蟲應該選擇Nutch、Crawler4j、WebMagic、scrapy、WebCollector還是其他的？這裏按照我的經驗隨便扯淡一下： 上面說的爬蟲，基本可以分3類： 1.分佈式爬蟲：Nutch 2.JAVA單機爬蟲：Crawler

>>阅读原文<<