Spark的好處及優點

1 官網地址 連接地址web 2 MapReduce侷限性 1)繁雜:Map和Reduce兩種操做,編寫好的代碼要打包運行,不能經過shell進行交互式處理,若是程序改動須要從新打成jar包。 2)處理效率低效。算法 IO:Map中間結果寫磁盤,Reduce寫HDFS,多個MR之間經過HDFS交換數據; 任務調 度和啓動開銷大; 進程級別 Map端和Reduce端均須要排序 3)不適合迭代計算(如
相關文章
相關標籤/搜索