热线电话:13121318867

登录
2019-02-25 阅读量: 1348
spark 中的driver的作用是什么?

spark 中的driver的作用是什么?

答:

Spark中的driver感觉其实和yarn中Application Master的功能相类似。

主要完成任务的调度以及和executor和cluster manager进行协调。有client和cluster联众模式。

client模式:driver在任务提交的机器上运行,

cluster模式:会随机选择机器中的一台机器启动driver。

我们可以从spark官网截图的一张图可以大致了解driver的功能。

0.0000
2
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子