会话管理组件
内容分类组件
图片解析组件
wechat use agent
消息接收与投递
[components]消息载体
[python]PyMuPDF pdf解析、pandas、xlrd excel 表格文件读取、pydocx 文件解析
文本内容
音视频组件
存储持久化会话内容、会话文本详细信息、会话模型路由匹配记录
职责：1、负责智能体任务的管控、任务的调度、任务的下发2、负责任务生命周期管理、任务监控
聊天内容信息获取模块
公共能力
[components]多模态数据生成
调用公共能力[HTTPS]
多模态聚合
[components]消息推送
[JAVA、python]用户行为分析、用户行为收据、数据分析
职责：1、知识库服务、负责所有的知识库管理2、行业知识库、私有知识库
图片处理程序
人工增强知识库
推送管理服务
AI 客服 agent (知识问答)
调用知识库能力[HTPPS]
[components]任务全生命周期状态机
web socket
标注平台
下发agent任务[HTTPS]
Web socket server
职责：1、负责所有会话存储。 2、负责会话查询、会话检索、会话列表返回3、会话管理
ABAC 自定义角色组装
[middleware]redis cluster/ mongoDB
联网搜索
任务周期管理
权限管理模块
职责：1、agent 集群 提供不同的agent能力开票、理票、会计2、提供ai基础能力、动态建设、动态扩容
[components]结构化向量库和语意向量库都没有匹配到、提示用户补充会话信息
[system：data check]发票知识库，明确边界
[components]针对结构化向量库匹配权重较低、以及没有明确判断出意图的 结合NLP 自然语言处理+ Ai大模型+ 知识库做判断
查找存量的会话信息[HTTPS]
访问互联网获取数据
外部系统
[components]调用多模态解析能力
职责：1、负责“聊天会话聊天信息”拉取2、消息承载平台3、消息推送
意图调度组件
[components]将用户上传的多模态数据、都解析成文本格式
持久化存储
[components]根据用户携带的文本是否包含明确的 关键字，如 \"开票\"、\"做账\"、“回单“，以及设定好的模版
agent 信息维护
[components]利用工程化能力、与Ai模型能力(包含生成能力)
职责：1、权限管理、权限分配、判断用户是否有agent 的权限2、自定义权限、多agent权限组合、权限管理
经纬 财务，税务等开放接口
解析调度组件
专业agent 集群
[python]百度 飞浆paddlepalle、Tr模型、AI 视觉模型
开票员 agent (专业能力)
历史会话内容查询、根据用户提供的会话内容、会话缓存内容存储、会话查询、存储
[components]任务观测
rpa，browser use agent 能力集
[components]拉取聊天信息发送给多模态解析
职责：1、负责数智员工的任务调度、根据意图识别结合服务注册发现，生成调用指定agent的任务。2、任务的生命周期管理、任务取消、任务记录、任务返回、任务分发
模型意图判断
缓存
agent 服务注册发现
[components]基于AI路由、自定义组装角色、构建不同范围不同能力的数字员工
知识库 (数据合法性)
意图识别 模块
多模态解析
heart
知识库 (发票知识库)
企业微信群
[agent] prompt + workflow
任务生命周期管理
[system：data check]税务知识库，明确边界
[components]消息托管服务
职责：1、负责智能体返回的消息接收2、负责将智能体接收的消息发送给用户
[JAVA]SkyWalking、Zipkin、prometheus
[components]动态维护智能体增量注册、后期维护
服务注册发现
任务元数据管理
文件处理程序
知识库管理
知识库 (税务知识库)
外部系统调用[HTTPS]
理票员 agent (专业能力)
[system：data check]数据知识库，明确边界
多模态解析 + 意图识别
智能体发送给消息推送服务
职责：1、外部工具增强、企业信息查询、信息不全2、企查查、亿企查、外部接口提供
持久化会话存储
微信群发消息[HTTPS]
查询agent服务、判断用户的调用权限{HTPPS}
链路监控组件
[components]存储 agent id 卡片信息 agent注册
根据多模态内容进行意图识别[HTTPS]
会话存档服务
[components]根据向量库匹配的路由，调度响应的智能体，如果意图识别未提供明确的路由、可用调用意图识别语意补充组件
基于规则意图判断
意图转化 （多重判断）
数据分析组件
会计师 agent (专业能力）
多模态解析 模块
知识库管理系统
ABAC 权限校验组件
未知意图补偿
[components]判断用户路由权限、用户鉴权
[components]利用公共ocr识别能力、视觉模型识别能力（包含生成能力）
文件解析组件
[components]新增任务、批量创建任务
定时拉取
[components]基于文件后缀分类(.doc /excel/.mp4/.mp3/text)
[agent] prompt + workflow整合预处理的数据结合AI模型提取有效数据
工具增强
任务可观测性监控
封装外部能力集
[components]任务调度分配
会话储存
微信群聊
[components]健康检查、硬件配置、绑定关系等
[system：data check]用于私域知识库的管理
[components]调用多模态解析能力- 生成能力
[middleware]七牛云、腾讯云、华为云
对象存储
[python]语音识别、科大讯飞、视觉模型、NLP
创建智能体任务、调用智能体能力
职责：1、负责多模态文件解析处理2、多模态支持excel、pdf、doc、视频、音频解析3、将多模态文件解析成文本内容为后续意图识别做消息预处理
多模态内容整合组件
多模态生成
[middleware]mysql、pgsql、ck、es
对话内容意图识别组件
携带用户AI路由权限、以及会话ID[HTTPS]
经纬 API
[components]结合用户会话内容，将用户提供的文本内容分别进入结构化知识库和结构话知识库进行意图识别、合法内容校验
意图路由权重判别组件
音频、视频处理程序
聊天消息推送模块
[components]文本内容直接提取
会话下沉
任务调度(优先级)
