Spark中常見方法的使用

Spark中常見方法的使用 1.reduceByKey() 在scala中,reduce表示進行某種操做,可是具體是何種操做,須要使用本身傳遞的函數做爲參數。 可是這裏的reduceByKey()則是將具備相同鍵的value合併,而後造成一個map,示例代碼以下:web scala> val book = Array(("spark",2),("hadoop",6),("hadoop",4),("
相關文章
相關標籤/搜索