從 Spark 到 Kubernetes — MaxCompute 的雲原生開源生態實踐之路

2019年5月14日,喜提浙江省科學技術進步一等獎的 MaxCompute 是阿里巴巴自研的 EB 級大數據計算平臺。該平臺依託阿里雲飛天基礎架構,是阿里巴巴在10年前作飛天系統的三大件之分佈式計算部分。10年後的今天,MaxCompute已是能夠承載EB級的數據存儲能力,百PB級的單日計算能力,公共雲覆蓋國內外十幾個國家和地區,專有云包含城市大腦在內部署超過100+套的阿里巴巴的統一計算平臺。

這裏要說的是,MaxCompute依託於阿里雲的飛天基礎架構,與今天業界常見的依託虛擬機技術 + 開源引擎的雲原生方案有很大的不一樣。

隨着聯合計算平臺的推出,MaxCompute 從能夠無縫集成 Spark到今天能夠經過提供標準的 Kubernetes 擁抱更加豐富的開源生態,一直秉承「保持自研優點,擁抱開源生態」的原則,走出了一條不同凡響的實踐之路。

在這條不同凡響的路徑背後,MaxCompute 開發團隊對於如何選擇技術棧、如何平衡成本、安全、兼容性等一系列問題都有哪些思考和展望?盡請關注

阿里雲聯合 CNCF 共同出品:Kubernetes and Cloud Native Meetup 上海站 
報名參加現場活動 >>>

【主題分享】從 Spark 到 Kubernetes — MaxCompute 的雲原生開源生態實踐之路
【分享嘉賓】李睿博 阿里巴巴高級技術專家
李睿博,花名藝卓,2009 年加入阿里,阿里雲智能計算平臺高級技術專家,負責帶領 MaxCompute 生態平臺團隊,致力於提高 MaxCompute 擁抱開源生態的能力。html

 

雲集國內外一線頂配陣容,雲原生最優實踐技術趴,更多精彩主題搶先揭祕安全

  • SAP、eBay 中國、惟品會、國泰君安、阿里雲、螞蟻金服技術專家齊聚,共同解讀雲原生落地最優實踐
  • 阿里雲高級技術專家解析 MaxCompute 雲原生開源生態
  • 惟品會大咖現場揭曉 Flink 項目雲原生化的心路歷程
  • 線上線下互動不停,參與 2 輪抽獎,贏取 CNCF 官方禮品、天貓精靈等精美禮品!

不在上海?到不了現場?
不要緊,咱們爲您準備了議題直播,歡迎點擊下面的直播連接,盡情圍觀!
直播連接 https://yq.aliyun.com/live/1072架構

 

原文連接分佈式

本文爲雲棲社區原創內容,未經容許不得轉載。大數據

相關文章
相關標籤/搜索