大數據框架略解:Hadoop、Yarn、Spark、Hbase

一、大數據框架 二、hadoop核心組件 Hadoop集羣具體來說包含兩個集羣:HDFS集羣和YARN集羣,兩者邏輯上分離,但物理上常在一起。 (1)HDFS集羣:負責海量數據的存儲。 (2)YARN集羣:負責海量數據運算時的資源調度。 (3)MapReduce:在分佈式計算框架上的可自定義設計框架,使用只需要定義其功能,而不用取考慮分佈式並行計算的細節。 (1)HDFS集羣 HDFS簡化了文件的
相關文章
相關標籤/搜索