HDFS有點甜,比您想象中有趣!

一、HDFS就像一位「成熟的男人」,他有故事 在Hadoop2.0的時代,HDFS的默認塊Block大小爲128MB,原來是有深層原因的。(據說面試題經常問這個) 如果Block塊太小,一個大文件被分成了若干個小Block,則需要花費很多時間用於Block文件的尋址,浪費了時間。 而Block塊太大,則會降低處理效率。如MapReduce將塊作爲一個map處理單元,如果只有一個塊,則同時只有一臺服
相關文章
相關標籤/搜索