采集器
2017-02-22 11:31:05 0 举报
采集器是一种用于收集数据的工具。它可以从各种来源获取信息,并将其整理成易于分析的格式。采集器通常用于网络爬虫、数据采集和数据挖掘等领域。它们可以自动执行任务,例如定期更新数据库或监控网站内容的变化。此外,采集器还可以根据用户的需求进行定制,以满足特定的数据采集需求。总之,采集器是一种功能强大且灵活的工具,能够帮助用户快速高效地收集和处理大量数据。
作者其他创作
大纲/内容
通过spring.application.name到CollectorService获取所有collectedItem的tagSet并缓存起来
删除上传失败的日志,并更新“最后更新时间\"
定时任务开始
采集项Collected Item
获取上传失败的日志
否
采集器Collector
上传日志和索引
是
从配置中心获取配置
定时任务结束
正常启动
记录上述日志到上传失败列表
整合上述日志,并根据tag来构建索引,记录最新的contextCount,并保存到文件
初始化contextCount
上传成功?
启动采集器
0 条评论
下一页