開天創世大數據面試題

開天創世   （1）畫圖講解spark工作流程，以及在集羣上和各個角色的對應關係 （2）spark哪些算子操作涉及到shuffle （3）spark性能優化主要有哪些手段 （4）map-reduce程序運行的時候會有什麼比較常見的問題 （5）hadoop和spark的shuffle過程，你怎麼在編程的時候注意避免一些性能問題 （6）hadoop的TextInputFormat作用是什麼，如何自定義

>>阅读原文<<