ejob分片逻辑图
2016-08-08 11:23:06 0 举报
ejob分片逻辑图是一种用于描述分布式系统中任务分配和处理的图形表示方法。它主要包括以下几个部分: 1. 数据源:表示需要处理的数据来源,如数据库、文件等。 2. 分片器:负责将数据源按照一定的规则划分为多个片段,每个片段独立进行处理。 3. 任务分配器:根据分片器划分的片段,将任务分配给不同的处理节点。 4. 处理节点:负责执行具体任务的处理单元,如CPU、GPU等。 5. 聚合器:负责将各个处理节点处理后的结果进行汇总,得到最终结果。 通过ejob分片逻辑图,可以清晰地展示分布式系统中任务的分配和处理过程,有助于优化系统性能和提高数据处理效率。
作者其他创作
大纲/内容
是否job所有分片项都 没running
是
结束
sharing分片
job放入错过执行节点
是,错过执行
设置job的cleaning移除job的complate清除cleaning
循环job对应分片项,一个分片项对应一个RPCURL,顺带加上分片参数发给PHPServer
否
开始
设置job的complete清除jobrunning
initSchedule或者executeJobInternal调用
清除上次job运行状态
任务job被调度时候
分片开始设置job的processing分片结束清除processing
注册作业完成信息
注册本次job运行状态running
是否需要分片
是否有错过执行job
0 条评论
下一页