Hive的工作原理

一、SQL語句轉換成MapReduce作業的基本原理 join的實現原理:sql獲取的數據先通過map函數處理,轉換成key-value形式,接着shuffle爲歸併的過程,將key相同的歸併到一起,最後通過Reduce函數處理。(關於MapReduce與shuffle的詳解請看MapReduce篇) 二、 Hive中SQL查詢轉換成MapReduce作業的過程 •當用戶向Hive輸入一段命令或查
相關文章
相關標籤/搜索