在Kubernetes上運行Spark

Spark可以運行在由Kubernetes管理的集羣上。此功能使用已添加到Spark的本地Kubernetes調度程序。 Kubernetes調度器目前是實驗性的。在未來的版本中，可能會出現配置，容器圖像和入口點的行爲變化。 先決條件 · Spark 2.3或更高版本的可運行分發。 · 正在運行的Kubernetes集羣版本> = 1.6，並使用kubectl爲其配置了訪問權限 。如果您還沒有可用

>>阅读原文<<