[Spark01]Spark產生背景及特點

Spark的產生背景以其特點 1、產生背景: MapReduce編程的不便性: 1)繁雜:開發一個作業,既要寫Map,又要寫Reduce和驅動類。當需求變動要改變大量的代碼 2)效率低:MapReduce基於進程,進程的啓動和銷燬要花費時間。 I/O頻繁:網絡I/O和磁盤I/O頻繁 每個階段都必須排序,但其實有些任務的排序是不必要的 3)不適合作迭代處理 4)只適合離線計算,不適合作實時處理 #S
相關文章
相關標籤/搜索