Hadoop-3.0.0-alpha1搭建

Hadoop3.0.0的新特新 –最底版本的Java版本由Java7升級爲Java8 –HDFS支持糾刪碼技術(即EC技術,它的基本原理是把M份原始數據經過矩陣運算的方式,生成K份效驗數據。這樣在整個M+K份數據中,丟失任何K份均可以正常恢復。最多見的糾刪碼配置大概會給每一份原始數據生成0.5份冗餘效驗數據。這樣就會把整個集羣的存儲成本減半。糾刪碼的代價就是在出現故障的時候要從新執行矩陣運算來恢復
相關文章
相關標籤/搜索