Push任务系统概况设计

ResultQueue

Master

Worker

任务生产集群：主要负责与数据源交互，Task生产入队，回写任务执行结果。其中master负责任务分配和与Zookeeper交互（心跳检测相关等），worker负责Task生产和入队。任务消费集群：主要负责推送任务执行和任务结果回写进队列。master负责任务获取，和与Zookeeper交互（心跳检测相关等），worker负责推送任务执行和结果入队。worker使用goroutine，master进行任务调度。

TaskQueue

Data Source

Zookeeper