從Hive處理日誌到可視化到實時

寫在前面 因爲公司業務每日的pv和uv須要統計，因此公司須要一套機制來去存儲數據，而且週期性地處理數據。web Hive 數據倉庫，創建在HDFS上，經過SQL語句處理海量數據。它會將SQL語句轉化成MapReduce過程，而後分發給集羣處理。元數據通常存儲在MySQL（關係數據庫）中。sql 分區 partition數據庫 靜態分區編程 根據partition的參數來分區編程語言 insert

>>阅读原文<<