bbb
2017-08-28 13:44:41 0 举报
aaaaaaaaaaaaaaaa
作者其他创作
大纲/内容
TASK MASTER
script generator
用于生成的数据上传到HDFS上将数据静态化,持久化保存
DISPATCH SERVER
dispatch agent
用于在任务结束后上传状态,包括任务执行是否成功,数据的stat
processgenerator
ASYNC LOOP LISTEN
server会向agent下发任务,agent会到HDFS上拉去数据
updatestatus worker
MYSQL
CASE: DISPATCH TASK
数据工厂平台UI
hdfs worker
CASE: data TASK
用户从界面上提交提交任务
进程生成器,用于生成本机任务进程,LOCAL进程,负责进程的生成,销毁和异常重试
TASKSEVER
0 条评论
下一页