實時計算輕鬆上手,阿里雲DataWorks Stream Studio正式發佈

Stream Studio是DataWorks旗下重磅推出的全新子產品。已於2019年4月18日正式對外開放使用。Stream Studi是一站式流計算開發平臺,基於阿里巴巴實時計算引擎Flink構建,集可視化拖拽DAG和SQL兩種開發模式,支持DAG與SQL互相轉換,經過可視化拖拽就能夠輕鬆實現流計算做業開發,適用於實時ETL、實時報表、實時大屏、監控預警以及各種實時在線系統等應用場景。python

Stream Studio的推出意味着DataWorks正式對外提供實時計算能力,進入到流、批全覆蓋的大數據全功能領域後端

在現有的實時數據開發領域中,用戶廣泛面臨下面幾大問題:

流任務開發複雜運維

  • 不管是SQL仍是Java、python,開發任務必須寫代碼,並且代碼形式不利於後期業務邏輯分析和維護
  • 開發過程當中沒法調試,只能等所有任務完成,才能上線調試,有問題修改後在上線,反覆驗證
  • UDF開發須要單獨打包編譯上傳,跟任務自己屬於分割開發狀態,容易形成流程繁瑣,版本混淆

運維難度大、門檻高工具

  • 運維門檻很是高,分析問題須要在不少運維指標裏抽絲剝繭,若是不是對實時計算引擎瞭解精深,對運行原理很是熟悉,很難作到有效運維、排查問題。
  • 單點任務開發功能
  • 不少工具只是負責流任務開發和運維,而用戶真正要使用的一套數倉服務,還須要用戶本身去對接流任務的先後端輸入產出

Stream Studio針對如今已有的這些問題,進行了高效的優化:

  • 零代碼開發實時任務:全面面向業務維度,提供SQL和DAG兩種開發模式,而且支持SQL和DAG互轉,在業界尚屬首次,非專業人士也能輕鬆上手。
  • 零學習成本:DAG模式下針對每一種算子進行錯誤檢查以及數據推演,準確輔助用戶「手把手」使用DAG進行開發。
  • 所見即所得:爲流計算用戶提供邊開發邊調試的功能,解決用戶在SQL開發過程當中沒法調試的痛點
  • 一站式開發:深度打通DataWorks Function Studio,無需依賴任何第三方開發工具,用戶能夠在線編寫UDF,同時支持一鍵發佈到Stream Studio。
  • 豐富的資源庫:爲用戶提供性能卓越的通用UDF,擴充Flink開發邊界,避免重複造輪子
  • 低運維成本:將專業的Flink任務運維診斷小白化,支持任務智能故障診斷,提供一鍵執行任務問題排查的能力,可對任務延遲、任務失敗、任務無數據產出等異常場景進行智能分析,並將結果直觀的反饋給用戶,提示用戶修復方案,爲流計算用戶提供一站式的智能診斷服務體驗


原文連接
本文爲雲棲社區原創內容,未經容許不得轉載。性能

相關文章
相關標籤/搜索