解析Spark在騰訊、雅虎、優酷的成功應用

摘要: spark的優點:(1)圖計算,迭代計算(2)交互式查詢計算 spark特色:(1)分佈式並行計算框架(2)內存計算,不只數據加載到內存,中間結果也存儲內存 爲了知足挖掘分析與交互式實時查詢的計算需求,騰訊大數據使用了Spark平臺來支持挖掘分析類計算、交互式實時查詢計算以及容許偏差範圍的快速查詢計算,目前騰訊大數據擁有超過200臺的Spark集羣,並獨立維護Spark和Shark分支。S
相關文章
相關標籤/搜索