Spark:有向無環圖(DAG)檢測

Spark背景介紹html Apache Spark 是專爲大規模數據處理而設計的快速通用的計算引擎。Spark 是一種與 Hadoop 類似的開源集羣計算環境,擁有Hadoop MapReduce所具備的優勢;但不一樣於MapReduce的是——Job中間輸出結果能夠保存在內存中,從而再也不須要讀寫HDFS,所以Spark能更好地適用於數據挖掘與機器學習等須要迭代的MapReduce的算法。ja
相關文章
相關標籤/搜索