餓了麼大數據計算引擎實踐與應用

本文主要介紹餓了麼大數據團隊如何通過對計算引擎入口的統一,降低用戶接入門檻。如何讓用戶自助分析任務異常及失敗原因,以及如何從集羣產生的任務數據本身監控集羣計算/存儲資源消耗,監控集羣狀況,監控異常任務等。 引擎入口統一 目前在餓了麼對外提供的查詢引擎主要有Presto、Hive和Spark,其中Spark又有SparkThrift Server和Spark SQL兩種模式,並且Kylin也在穩步試
相關文章
相關標籤/搜索