阅读背景:

Spark开发-Yarn cluster模式

来源:互联网 

1、部署及程序运行
YARN cluster模型,顾名思义就是通过Hadoop YARN框架来调度spark应用所需的资源,要将Spark集群运行在YARN模式下,首先需要部署一个YARN集群提供该模式使用,在实际应用中,这两者的因果关系往往是反过来的,这是因为用户有一个Hadoop YARN集群,因此希望将spark也纳入YARN的调度管理中,这样有利于系统的资源共享, YARN cluster模型,顾名思义就是通过Hadoop YAR




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: