AI
推荐
模板社区
专题
登录
免费注册
首页
流程图
详情
YARN架构
2016-11-02 16:42:38
70
举报
分享方式
免费使用
MapReduce on YARN
MypReduce
YARN
模版推荐
作者其他创作
大纲/内容
client（客户端）
4、ResourceManager通过资源调度器去给这个job分配一些container，这些container就是用来执行map任务或者reduce任务的
2、选择一台NodeManager去开启一个Container，在这个Container中开启了ApplicationMaster(管理器)
5、执行完通知
通过
Container
NodeManager
ApplicationsManager(应用管理)
resourcemanager
5、reduce task它会反复的询问ApplicationMaster，哪些map任务执行完了，如果得到了消息，就会去那个Map task中去获取结果，作为自己的输入。执行结束后通知ApplicationMaster
3、计算这个job需要的资源，\t向ResourceManager申请资源
ResourceSchedule(资源调度)
reduce task
ApplicationMaster(管理器)
6、执行任务完后，ApplicationMaster会通知client，汇报结果，然后会退出。
map task
1、提交一个MapReduce程序
收藏
立即使用
spark
收藏
立即使用
YARN架构
PO_a0e01a
职业：ceo
去主页
Collect
Get Started
平台总体架构图
Collect
Get Started
Openclaw架构
Collect
Get Started
软件架构、系统架构、功能架构、架构模型、架构
Collect
Get Started
软件系统架构图
评论
0
条评论
下一页
Document
