Spark的基本概念

2018年年底,開始spark學習 http://dblab.xmu.edu.cn/blog/1709-2/python 1  spark 涉及的名詞解析 Block  輸入可能以多個文件的形式存儲在HDFS上,每一個File都包含了不少塊,稱爲Block。學習 InuptSplit  當Spark讀取這些文件做爲輸入時,會根據具體數據格式對應的InputFormat進行解析,通常是將若干個Blo
相關文章
相關標籤/搜索