大模型知识库构建通用技术路径
2025-12-13 14:45:20 0 举报
包括数据采集、数据清洗、语义建模、向量库构建、QA对构建、知识图谱构建等。
作者其他创作
大纲/内容
模型2
向量知识库
存储
指标2
纬度1
维度3
维度1
自动拆分为QA对
指标1
分块
HIVE
纬度3
上传文档 docx、excel、csv
预案方案库、业务规则库、历史场景库、调度方案库、专家经验库、工程安全知识库、政策法规库
清洗好的数据
QA知识库
包含预案方案库、业务规则库、历史场景库、调度方案库、专家经验库、工程安全知识库、政策法规库
纬度2
向量化数据
反馈数据
术语1
向量化数据库
选择数据源创建语义模型
纯文本
QA
网络爬虫
text2sql组件2
text2sql 组件1
向量化模型
TiDB
获取的是数据元信息
数据采集
数据建模
数据集1
自动抽取知识图谱
联网搜索
视频链接
markdown
预案回流数据
智能问数组件
数据采集与清洗平台
数据中台
数据集2
使用sql查询数据
图片链接
知识图谱
向量化
音频链接
维度2
自动抽取完善补充schema
文件
数据同步
接口
数据清洗
达梦
模型3
数据集3
模型1
上传文件借助大模型自动构建schema
收藏
收藏
0 条评论
下一页