大數據日知錄理解(1)

一、系統拓展性 提高系統拓展性主要分爲兩種:一種爲增加單機數量;一種爲提高單機硬件資源配置。我們接觸的大多數大數據存儲與計算系統一般採用第一種方式來提高拓展性。 二、數據分片與數據複製 數據分片: 之前在Hadoop的學習中也涉及到這個概念,目的是把數據切分;在Hadoop中有一個block塊的概念,Hadoop2.7.3中把一個block塊設置爲128m,如果處理一個文件,這個文件大於128m,
相關文章
相關標籤/搜索