HDFS副本放置策略

HDFS副本放置策略 一、Rack機架 一般情況下,一臺機架大概如下配置: 1臺刀片機 256G內存 56物理核 4塊500G ssd 10塊 1T/塊 機械硬盤 1W轉 2顆GPU(不是cpu)用於數據挖掘 二、副本放置策略 假設有一份數據,三副本 第一個副本:在DataNode數據節點提交時,第一個塊是本地節點,目的是節省了本地資源,佔用了更少的帶寬,如果是在集羣外提交,則隨機挑選一臺磁盤不太
相關文章
相關標籤/搜索