SparkOnYarn

Spark On Yarn的本质? Master角色由YARN的ResourceManager担任. Worker角色由YARN的NodeManager担任. Driver角色运行在YARN容器内 或 提交任务的客户端进程中 真正干活的Executor运行在YARN提供的容器内 Spark On Y ......