Java爬蟲框架Webmagic

webmagic是一個開源的Java爬蟲框架,目標是簡化爬蟲的開發流程,讓開發者專注於 邏輯功能的開發。webmagic的核心非常簡單,但是覆蓋爬蟲的整個流程,也是很好的學習 爬蟲開發的材料。 webmagic的主要特色: 完全模塊化的設計,強大的可擴展性。 核心簡單但是涵蓋爬蟲的全部流程,靈活而強大,也是學習爬蟲入門的好材料。 提供豐富的抽取頁面API。 無配置,但是可通過POJO+註解形式實現
相關文章
相關標籤/搜索