Hadoop學習總結之HDFS

簡介 首先簡單介紹一下HDFS。 HDFS的設計思想: 分而治之:將大文件、大批量文件,分佈式存放在大量服務器上,以便於採取分而治之的方式對海量數據進行運算分析;爲各類分佈式運算框架(如:mapreduce,spark等)提供數據存儲服務。 HDFS的特性: 1) HDFS中的文件在物理上是分塊存儲(block),塊的大小可以通過配置參數( dfs.blocksize)來規定,默認大小在hadoo
相關文章
相關標籤/搜索