Spark之Action算子(一)

Spark算子分爲兩大類,本文介紹Action類算子。數組 (1)reduce算子函數 按照官網的解釋,傳入的參數是一個函數,一個雙參數,返回值惟一的函數,建議,該函數是可交換的,是可聯合的,如此,才能實現正確的並行計算。oop 這裏的函數,我平時用過加法操做,最大值操做,最小值操做;記得大數據裏提過這個概念,諸如此類能夠合併操做的函數,是最合適的,平均值類的,就不適用於此種操做了。大數據 如上圖
相關文章
相關標籤/搜索