XXL-CRAWLER v1.2.2 發佈,分佈式爬蟲框架

v1.2.2 新特性 1、系統底層重構,規範包名; 2、採集線程白名單過濾優化,避免冗餘失敗重試; 3、增強JS渲染方式採集能力,原生新提供 「SeleniumPhantomjsPageLoader」,支持以 「selenisum + phantomjs」 方式採集頁面數據; 4、支持採集非Web頁面,如JSON接口等,直接輸出響應數據;選擇 「NonPageParser」 即可; 簡介 XXL-
相關文章
相關標籤/搜索