想成爲大數據開發工程師，你必須掌握的開發流程圖是這樣的

  1、數據處理主要技術 Sqoop：（發音：skup）作爲一款開源的離線數據傳輸工具，主要用於Hadoop(Hive) 與傳統數據庫（MySql,PostgreSQL）間的數據傳遞。它可以將一個關係數據庫中數據導入Hadoop的HDFS中， 也可以將HDFS中的數據導入關係型數據庫中。 Flume：實時數據採集的一個開源框架，它是Cloudera提供的一個高可用用的、高可靠、分佈式的海量日誌採集

>>阅读原文<<