HDFS-001-瞭解

hadoop的思想就是把一個文件劃分爲N個block,然後把block散列到不同機器上。 因此block塊的大小設定就非常重要了 大數據運算的結論: 1.分治思想 2.並行計算 3.計算向數據移動(減少傳輸IO消耗的時間  數據移動比分佈式計算更耗時) 4.數據本地化讀取 這四個條件將是整個大數據技術需要關心的重點 什麼是HDFS? HDFS( Hadoop Distributed File Sy
相關文章
相關標籤/搜索