Spark图解
2018-12-25 11:41:17 0 举报Spark图解
作者其他创作
大纲/内容
ApplicationInfo
12.响应消息ExecutorStateChanged
TaskSchedulerImpl
Executor进程
Driver状态改变
4.向master注册
12.响应消息（DriverStateChanged）
1
Executor状态改变
Worker
启动线程，创建Driver
Driver进程
SparkContext
资源调度算法
DriverRunner
13.Worker实际上会将DriverStateChanged消息发送给Master
5
启动线程，创建Executor
8
11
10
13.Worker发送ExecutorStateChanged消息给Master
AppClient
2
收到Executor启动消息（LaunchExecutor）
3
启动注册自己
7
6.反向注册
收到Driver启动消息（LaunchDriver）
9.workers上启动和调度executor
等待调度的队列
Master
SparkDeploySchedulerBackend
0 条评论
下一页
