大數據工程師必會的知識點之一：關於hive的分區和分桶

  1、Hive分區表 在Hive Select查詢中一般會掃描整個表內容，會消耗很多時間做沒必要的工作。有時候只需要掃描表中關心的一部分數據，因此建表時引入了partition概念。分區表指的是在創建表時指定的partition的分區空間。 Hive可以對數據按照某列或者某些列進行分區管理，所謂分區我們可以拿下面的例子進行解釋。 當前互聯網應用每天都要存儲大量的日誌文件，幾G、幾十G甚至更大都是

>>阅读原文<<