數據採集中間件技術對比V1.0

1 前言 大數據平臺一般包括以下幾個步驟： 數據採集 -> 數據存儲 -> 數據分析 -> 數據展示(可視化、報表、監控等) 其中數據採集是一個十分重要的組成部分。大數據採集的任務也有許多特點，比如：數量大、數據源多樣性、變化快、保證數據正確、避免數據重複等。 這裏我們調研了幾款常用的大數據採集中間件：datax、flume、sqoop、canal、maxwell、nifi和kettle。 以下，

>>阅读原文<<