Apache Sqoop - Overview Apache Sqoop 概述

使用Hadoop來分析和處理數據需要將數據加載到集羣中並且將它和企業生產數據庫中的其他數據進行結合處理。從生產系統加載大塊數據到Hadoop中或者從大型集羣的map reduce應用中獲得數據是個挑戰。用戶必須意識到確保數據一致性,消耗生產系統資源,供應下游管道的數據預處理這些細節。用腳本來轉化數據是低效和耗時的方式。使用map reduce應用直接去獲取外部系統的數據使得應用變得複雜和增加了生產
相關文章
相關標籤/搜索