本次分享來自中國HBase技術社區第七屆MeetUp成都站,分享嘉賓鄭浩南 愛奇藝 資深研發工程師,專一於大數據領域,負責Hadoop服務的運維研究以及DevOps平臺開發。
分享主題:HBase在愛奇藝的應用實踐架構
內容概要:隨着大數據存儲計算對延時吞吐要求愈來愈高,需求日益複雜化,HBase在愛奇藝中被普遍應用和實踐以應對多樣化的業務場景。本次演講將介紹HBase在愛奇藝的部署模式和使用場景,以及在愛奇藝私有云環境下的運維策略。運維
下載連接:http://hbase.group/slides/168ide
1.使用現狀oop
概況大數據
HBase版本blog
1.2.0-CDH5.14.4-qiyi-1開發
規模部署
物理機數量6000+,最大集羣1500節點產品
數據總量約3PB(單備份),大表>100TB社區
離線QPS 50 Mil+,線上QPS 3 Mil+
服務使用架構
私有云環境
大數據平臺化服務
大數據產品棧