【Spark on Kubernetes】Executor環境變量

今天在給 Executor 配置環境變量的時候,以爲 Executor 環境變量跟 Driver 一樣是通過 spark.kubernetes.driverEnv.XXX=YYY,最後發現其實是 spark.executorEnv,要注意 Env 的大小寫,都是細節… 可以看到下圖,其實 Spark on Kubernetes 的文檔,並沒有寫,所以 Executor 環境變量就是普通的參數即可。
相關文章
相關標籤/搜索