餓了麼大數據計算引擎實踐與應用

原文鏈接:點擊打開鏈接 摘要: 餓了麼BDI-大數據平臺研發團隊目前共有20人左右,主要負責離線&實時Infra和平臺工具開發。其中6人的離線團隊需要維護大數據集羣規模如下: Hadoop集羣規模1300+ HDFS存量數據40+PB,Read 3.5 PB+/天,Write 500TB+/天 14W MR Job/天,10W Spark Job/天,25W Presto/天 此外還需要維護Had
相關文章
相關標籤/搜索