[spark 面試]yarn 生產環境下資源不足問題和網絡的問題

1、Yarn資源不足無法提交Spark的問題  2、Yarn-Client下網絡流量的問題 ResourceManager會接收你的提交請求嗎?Yarn一般把自己的資源分成不同的類型,我們接收的時候會專門提交到分配給Spark那一組資源,例如說此時資源信息如下:Memory 1000G,Cores 800個,此時你要提交的Spark應用程序可能需要900G的內存和700個Core,一定會沒有問題嗎
相關文章
相關標籤/搜索