hadoop的三大核心組件功能

hadoop的三大組件功能：

Common :

    工具，基礎，爲服務

MapReduce：

    對海量數據的處理

    分佈式

    思想

             分而治之

            大數據集分爲小的數據集

            每一個數據集，盡心邏輯業務處理map

            合併統計數據結果reduce

HDFS:

     存儲海量數據

    分佈式

    安全性

           副本數據

   數據是以block的方式進行存儲的

    NameNode

          內存

          本地磁盤 

                    fsp_w_picpath:鏡像文件

                     edites：編輯日誌

                     

YARN：

    分佈式資源管理框架

    管理整個集羣的資源（內存，cpu核數）

   分配調度集羣的資源