HDFS-Tiering 數據分層存儲

1. 背景 隨着小米業務迅猛發展，存儲到 HDFS 集羣的數據量不斷增大，存儲成本也不斷攀升。尤其是海外 HDFS 集羣每 GB 數據的成本是國內集羣的 10 倍左右，如何優化海外集羣的存儲成本變得非常迫切。海外 HDFS 集羣主要採用雲主機掛載 EBS 的方式搭建，EBS 是成本的大頭。但 EBS 可靠性高，性能優良，又是業務正常運行的保障。 經過我們對 HDFS 元數據信息的分析，以印度離線集

>>阅读原文<<