阿里雲MaxCompute持續挑戰極限,北京雲棲大會現場完成基於公共雲的BigBench評測!

摘要: 2017年12月19 -20日,引起全球科技共振的雲棲大會在國家會議中心舉辦2017年的壓軸場—北京峯會。在本次大會上,阿里雲主力計算平臺MaxCompute將全球首次現場完成基於公共雲的BigBench評測,並由阿里雲總裁胡曉明在20日上午的主論壇宣佈最終結果,使人期待。算法

2017年12月19 -20日,引起全球科技共振的雲棲大會在國家會議中心舉辦2017年的壓軸場—北京峯會。在本次大會上,阿里雲主力計算平臺MaxCompute將全球首次現場完成基於公共雲的BigBench評測,並由阿里雲總裁胡曉明在20日上午的主論壇宣佈最終結果,使人期待。安全

什麼是BigBench大數據測試基準?數據結構

BigBench是基於零售業場景構建的端到端大數據測試基準,支持主流分佈式大數據處理引擎,模擬了整個線上與線下業務流程,有30個查詢語句,涉及到描述性過程型查詢、數據挖掘以及機器學習的算法。涵蓋告終構化、半結構化和非結構化數據,相對sort單一的數據結構和計算方式,可以從客戶實際場景角度更全面的評估大數據系統軟硬件性能。機器學習

**什麼是MaxCompute**分佈式

做爲全新一代人工智能計算引擎的MaxCompute(原ODPS),是一項提供快速、徹底託管的PB級數據倉庫解決方案的大數據計算服務,能夠高效並經濟的分析處理海量數據。
MaxCompute2.0是阿里巴巴內部和阿里雲的大數據旗艦平臺,阿里巴巴近99%的數據存儲以及95%的計算能力都在這個平臺上產生。在今年的雙11當天,MaxCompute當日數據處理超過320PB,至關於全球最大圖書館-美國國會圖書館藏書存儲的信息量的1200倍。同時數百萬級的調度做業,持續衝擊極限,以75%的增量全面超越2016年雙11。性能

圖片描述

MaxCompute2.0在保持了大規模計算存儲、強數據安全、高性能低成本的前提下,支持多源異構數據的離線/實時採集,支持SQL、MR、UDF(Java/Python)Graph、交互式、內存計算、機器學習等多種計算模式。爲衆安保險華大基因ofo小黃車等衆多客戶提供計算服務,爲企業極大的提高了運行效率,下降了財務和人力成本。學習

MaxCompute爲何選擇在北京雲棲大會現場完成BigBench評測?測試

做爲計算平臺,性能和效率是最核心的指標。做爲阿里雲的主力計算平臺,MaxCompute一直積極參加各種計算評測,經過評測來推進阿里雲計算性能的不斷提高。大數據

2015年咱們參加了GraySort 評測。該比賽旨在評測超大規模數據量排序的速度,阿里雲計算平臺最終以377秒完成了100TB的數據排序,打破了Apache Spark23.4分鐘的原有記錄。阿里雲

2016年咱們參加了被稱爲「雲計算效率之爭」的CloudSort,以0.82美金/TB的成績得到Indy(專用目的排序)和Daytona(通用目的排序) 兩個子項的世界冠軍,打破了AWS在2014年保持的紀錄4.51美金/TB。阿里雲計算平臺在「算的快」的前提下,進一步創造了性價比的新世界記錄。

2017年MaxCompute但願能從更接近實際生產場景和客戶場景的角度,來呈現阿里雲計算平臺的計算速度和性價比優點。進行BigBench評測是由於它是基於零售業場景構建的端到端大數據測試基準,支持主流分佈式大數據處理引擎,模擬了整個線上與線下業務流程,有30個查詢語句,涉及到描述性過程型查詢、數據挖掘以及機器學習的算法。涵蓋告終構化、半結構化和非結構化數據,相對sort單一的數據結構和計算方式,可以從客戶實際場景角度更全面的評估大數據系統軟硬件性能。在把TPC的benchmark適配到MaxCompute後,咱們將數據規模提高至100TB來完成本次直播評測, 咱們對評測結果和計算能力有着絕對的信心,但願在雲棲大會北京峯會主論壇和展廳現場與各位開發者和大數據愛好者共同見證。

2017年12月19日-20日,國際會議中心南序廳(近國家體育場北路)「大數據計算服務MaxCompute」展臺,不見不散。

相關文章
相關標籤/搜索