大數據日知錄(一)數據分片與路由

概念     目前主流的大數據存儲與計算系統通常採用橫向擴展(Scale Out)的方式支持系統可擴展性,即通過增加機器數目來獲得水平擴展能力。對於待存儲處理的海量數據,需要通過數據分片(Shard/partition)來將數據進行切分並分配到各個機器中去,數據分片後如何找到某條記錄的存儲位置就成爲必然要解決的問題,這一般被稱爲數據路由(Data Routing)。數據分片和數據路由的抽象模型如下
相關文章
相關標籤/搜索