【职造便利店】 可追溯性要求(AI)
2022-08-09 10:44:42 13 举报
AI智能生成
登录查看完整内容
随着人们对人工智能的期望越来越高,人工智能识别的精确度和召回率很大程度上取决于数据标注、算法。算法设计的完整性需要从设计开发与验证、功能与界面、临床部署与软件迭代几个维度去考量,本文档主要阐述医疗器械AI可追溯性的基本要求。
作者其他创作
大纲/内容
数据收集
算法性能
使用限制
需求分析
预期用途使用场景
软件需求与产品需求
软件需求与风险分析
算法需求与风险分析
建立可追溯性需求
需求
设计
验证
确认
需求一致性评审
垂直可追溯性
水平可追溯性
确定需求层级
制定需求命名规则
需求跟踪(垂直、水平)
需求数据库
1.1 需求分析追溯
包含:决策失误(假阴、假阳)不可预测、不可重复、过拟合等
算法风险
包含:算法时空(用户无法控制产品)、人为操作失误等
操作风险
包含:敏感信息泄露、数据污染、数据偏倚、数据不完整等
数据集风险
包含:临床部署场景导致的算法性能下降、效率下降等
场景风险
根据预期用途、自治能力
1.2 风险管理追溯
原始数据来源、元数据来源、合规性证明
数据采集活动记录
人员管理记录
数据标注流程记录
盲态管理记录
数据流通记录
数据质疑、审计、停用、纠正记录
标注工具、平台使用记录
数据集标注结果的统计信息查询,包括标注进展、标签统计、标注者进展统计、难例集等
数据服务异常与故障记录
数据维护与备份记录
数据更新记录
云服务提供商名称、联系方式、云服务类型等
1.3 数据集追溯
软件设计规范
软件需求规范——垂直追溯(溯源至恰当的设计元素)
1.4 软件设计追溯
通过源代码将设计规范转换为软件系统
源代码/软件单元与软件设计
源代码与测试用例
通过配置管理系统实现软件编码的配置管理
确保软件设计规范中的每个要素均已源代码/软件单元实现
源代码/软件单元
人工智能算法设计
1.5 软件时间追溯
1.6 软件验证与确认追溯
1.7 可追溯性矩阵要求(以算法为例)
1. 设计开发与验证要求
2.1 功能要求
2.2 界面要求
2. 功能与界面要求
软件环境
硬件配置
网络资源
临床部署环境
性能
安全
人机协同效果
使用反馈
制造商技术手段帮助授权用户记录
3.1 临床部署
触发产品迭代的原因
面向新场景
新用途的风险评估
迭代需求分析
产品迭代使用的训练集、调优集、再评价使用的测试集、测试结果
制造商宜记录软件上市后的迭代过程
建立可追溯性分析矩阵
3.2 软件迭代
3. 临床部署与软件迭代
可追溯性要求(AI)
0 条评论
回复 删除
下一页