HDFS詳細

HDFS是一個分佈式文件存儲系統,是 hadoop 生態中用於解決分佈式存儲問題的核心,是由谷歌的dfs論文催生出的分佈式文件成存儲解決方案。 存儲模型 文件線性按字節切割成(block)，具有 offset，id 文件與文件的 block 大小可以不一樣 一個文件除最後一個 block ，其他 block 大小一致 block 的大小依據硬盤的 I/O 特性調整 block 被分散存放在集羣的節

>>阅读原文<<