阅读背景:

spark core 2.0 CoarseGrainedSchedulerBackend SchedulerBackend ExecutorAllocationClient 源代码解析

来源:互联网 

CoarseGrainedSchedulerBackend等待一个粗粒度的执行器来连接。这个backend在整个spark job期间保持每一个执行器。而不是当任务运行完之后就丢弃执行器,等运行新任务的时候再申请新的执行器。 执行器可以以不同的方式启动,如粗粒度的Mesos模式下的Mesos任务,和Spark独立模式下的独立进程。CoarseGrainedSchedulerBackend等待一个粗粒度的执行器来连接。这个b




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: