elasticsearch使用BulkProcessor批量入庫數據

在解決es入庫問題上,以前使用過rest方式,通過一段時間的測試發現千萬級別的數據會存在10至上百條數據的丟失問題,在須要保證數據的準確性的場景下,rest方式並不能保證結果的準確性,所以採用了elasticsearch的BulkProcessor方式來進行數據入庫,實際上採用es客戶端不一樣,rest方式採用的是restClient,基於http協議,BulkProcessor使用的是Trans
相關文章
相關標籤/搜索