spark面試問題彙總（持續更新....）

spark-submit的時候如何引入外部jar包 spark shuffle的具體過程，你知道幾種shuffle方式 spark 如何防止內存溢出 cache和pesist的區別 怎麼處理數據傾斜 ​簡要描述Spark分佈式集羣搭建的步驟web spark使用： 1）當前文件a.text的格式爲，請統計每一個單詞出現的個數、計算第四列每一個元素出現的個數 A,b,c,d B,b,f,e A,a,

>>阅读原文<<