巧用數據採集中的內容過濾方法加工出所需的數據

簡數採集平臺已集成豐富的數據處理功能,可以在採集過程中一併把數據進行加工。 此章節詳述內容過濾方法可根據採集結果的內容或文本長度,判斷數據是否採集入庫; 詳細使用步驟: 採集結果不得爲空 內容過濾 文本長度過濾   1. 採集結果不得爲空   作用是當該字段採集內容爲空時,此數據不採集入庫,title字段默認啓用該功能,可過濾不同結構的廣告或專題頁面;   2.內容過濾   可設置當字段採集結果不
相關文章
相關標籤/搜索