2019-07-01
阅读量:
2728
Spark driver的功能是什么？
Spark driver的功能是什么？
答：
1）一个Spark作业运行时包括一个Driver进程，也是作业的主进程，具有main函数，并且有SparkContext的实例，是程序的人口点；
2）功能：负责向集群申请资源，向master注册信息，负责了作业的调度，，负责作业的解析、生成Stage并调度Task到Executor上。包括DAGScheduler，TaskScheduler。
0.0000
0
5
关注作者
收藏
评论(0)
发表评论
暂无数据
推荐帖子
ly168168
2025-09-02
0条评论
天下无欺诈
2025-08-06
0条评论
CDA持证人阿涛哥
2025-05-24
0条评论