spark學習之路(起始篇)

對於spark,我基本上算是個小白,若是說的不對,或者各位大佬有不一樣的意見,歡迎提出來一塊兒分享 。今天主要是梳理一下需求,肯定一下學習方向web 項目中由於原始框架沒法達到大量數據計算的要求,初步選擇用spark來達到快速計算的需求,下面介紹大體狀況:數據庫 場景爲項目中的某一個設計到大量複雜計算的模塊 設計數據量百萬級數據,並會涉及到多層循環計算 數據來源爲MySQL數據庫 初始想法爲將數據
相關文章
相關標籤/搜索