采集自动化设计流程图
2017-04-10 09:50:44 0 举报
采集自动化设计流程图描述: 该流程图展示了一个典型的采集自动化设计过程。首先,从数据源获取原始数据。接着,对数据进行预处理,包括清洗、去重和转换格式等操作。然后,根据需求设计数据采集策略,确定采集的频率、时间和内容。接下来,使用合适的工具和技术进行数据采集,如爬虫、API调用或传感器等。采集到的数据会被存储在数据库或云存储中,以备后续分析和使用。最后,对采集到的数据进行分析和可视化,以便提取有价值的信息和洞察。整个流程旨在实现自动化的数据采集和管理,提高效率和准确性。
作者其他创作
大纲/内容
数据处理完毕
是否需要回复帧
yes
连接关闭设置
读取协议回复数据标签
读取校验与帧尾报文数据配置
采集端结束
读取传输层协议和端口报文读写超时设置粘包与半包配置
maxFrameLength 帧的最大长度lengthFieldOffset length字段偏移的地址lengthFieldLength length字段所占的字节长lengthAdjustment 修改帧数据长度字段中定义的值initialBytesToStrip 解析时候跳过多少个长度failFast 为true,当frame长度超过maxFrameLength时立即报TooLongFrameException异常,为false,读取完整个帧再报异
配置文件启动(输入厂家标识)
根据标识读取规定目录下标识数据协议文件内容如下
no
插入失败日志之后退出程序
字节序字段类型比特解析字段名是否数据字典数据字典对应关系处理类型是否为循环处理字段备注信息
消费者处理数据
验证失败
验证成功
读取回复帧数据设置返回设备数据
头部与数据区报文配置(根据报文个数重复如下字段配置)
数据按照规定格式拆分送进kafka
收藏
0 条评论
下一页