30天搞定spark源碼系列-scheduler-運行模式篇

閱讀這篇文章,你應該得到面試中有可能會問到的幾個問題的答案: spark的運行模式有幾種? 這幾種運行模式在調度上有什麼差別? 思路 其實簡單使用過spark的童鞋們都應該知道spark的運行模式就是這幾種,一些人也能大致說出不同運行模式的差別,這裏我們從源碼的角度分析一下運行模式的不同會引起什麼樣的任務調度 local模式 1、定義 spark的local模式是在本地起多個Thread,每個th
相關文章
相關標籤/搜索