在Kubernetes上运行Spark

Spark可以运行在由Kubernetes管理的集群上。此功能使用已添加到Spark的本地Kubernetes调度程序。 Kubernetes调度器目前是实验性的。在未来的版本中，可能会出现配置，容器图像和入口点的行为变化。 先决条件 · Spark 2.3或更高版本的可运行分发。 · 正在运行的Kubernetes集群版本> = 1.6，并使用kubectl为其配置了访问权限 。如果您还没有可用

>>阅读原文<<