HDFS糾刪碼
糾刪碼是CDH6/Hadop3引入的新功能，之前的HDFS都是副本方式容錯，默認情況下，一個文件有三個副本，可以容忍任意2個副本（Datanode）不可用，是以犧牲空間的代價提供了數據的可用性，帶來了2倍的冗餘開銷。例如1TB的數據，需要3TB的空間來進行存儲。而糾刪碼可以在同等可用性的情況下，節省更多的空間。 以RS-6-3-1024k爲例，6份原始數據，編碼後生成3份校驗數據，一共9份數據，只
相關文章
- 1. HDFS 糾刪碼
- 2. HDFS EC：將糾刪碼技術融入HDFS
- 3. 糾刪碼
- 4. Reed Solomon糾刪碼
- 5. hadoop-3.0.0-beta1運維手冊（011）：HDFS Erasure Coding糾刪碼使用
- 6. 【轉】Reed Solomon糾刪碼
- 7. Erasure code（糾刪碼）原理
- 8. 糾刪碼(EC)的學習
- 9. EC糾刪碼原理
- 10. 如何選擇糾刪碼編碼引擎 | 糾刪碼技術詳解（上）
- 更多相關文章...
- • XML 編碼 - XML 教程
- • HTTP狀態碼 - HTTP 教程
- • Scala 中文亂碼解決
- • IntelliJ IDEA代碼格式化設置
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
