spark比MapReduce快的緣由

park比MapReduce快的緣由數組 Spark是基於內存的,而MapReduce是基於磁盤的迭代函數 MapReduce的設設計:中間結果保存在文件中,提升了可靠性,減小了內存佔用。可是犧牲了性能。 Spark的設計:數據在內存中進行交換,要快一些,可是內存這個東西,可靠性不如磁盤。因此性能方面比MapReduce要好。 DAG計算模型在迭代計算上仍是比MapReduce的效率更高性能 有向
相關文章
相關標籤/搜索