Hadoop視頻教程_Hadoop2.0/YARN深刻淺出(Hadoop2.0、Spark、Storm和Tez)
適合人羣:初級
課時數量:21課時
用到技術:Hadoop2.0、Spark、Storm和Tez
涉及項目:YARN資源管理系統
諮詢qq:1840215592html
Hadoop視頻教程課程介紹:
本課程詳細講解了Hadoop 2.0架構、部署以及YARN,並講解了運行在YARN上主要的計算框架,包括Spark、Storm和Tez
Hadoop視頻教程針對人羣:
一、本課程適合於有必定java基礎知識,對數據庫和sql語句有必定了解,熟練使用linux系統的技術人員,特別適合於想換工做或尋求高薪職業的人士
二、最好有Greenplum Hadoop大數據基礎,學習過北風課程《Greenplum 分佈式數據庫開發入門到精通》、《全面深刻Greenplum Hadoop大數據分析平臺》爲最佳.
Hadoop2.0/YARN深刻淺出詳細介紹:http://www.ibeifeng.com/goods-435.html
Hadoop視頻教程大綱:
Hadoop 2.0(6課時)
Hadoop 2.0產生背景
Hadoop 2.0基本構成
HDFS 2.0
MapReduce 2.0
Hadoop 2.0安裝配置
集羣測試
YARN資源管理系統(4課時)
YARN產生背景
YARN基本設計思想
YARN基本架構
YARN工做流程
YARN通訊協議
YARN容錯
YARN資源調度機制
YARN支持的計算框架(Storm,Tez,Spark)(11課時)
以YARN爲核心的生態系統
Storm基本概念
Storm流式計算框架
基於YARN的Storm架構
YARN-Storm部署
Storm On YARN服務
Apache Tez介紹
Tez特色
Tez數據處理引擎
DAGAppMaster實現
Tez優化機制
Tez應用場景
Tez部署
什麼是Spark
Spark生態系統
Spark的核心--RDD和Lineage
RDD的存儲、容錯機制、內部設計及數據模型
Spark調度框架
Spark的分佈式部署方式
基於Mesos的Spark模式
基於YARN的Spark模式
Spark的獨立模式部署
Spark的YARN模式部署java