hive 和hadoop數據壓縮與存儲格式選擇

hive和hadoop 數據壓縮與存儲格式選擇 概述 爲什麼會出現需要對文件進行壓縮？  在Hadoop中，文件需要存儲、傳輸、讀取磁盤、寫入磁盤等等操作，而文件的大小，直接決定了這些這些操作的速度。 壓縮在大數據中的使用 爲什麼需要壓縮？ 1） 存儲 2） 網絡/磁盤IO  常見壓縮方式、壓縮比、壓縮解壓縮時間、是否可切分 原文件：1403M Snappy 壓縮：701M，壓縮時間：6.4s，解

>>阅读原文<<