示例成品 · 平台演示,按左边这组点选真跑出来的
示例:模型方案评审意见表(示意)
总体结论:需修改后再评。共发现 7 项问题,其中严重 2 项、中等 3 项、轻微 2 项。
检查项 | 是否满足 | 问题描述 | 建议补充证据 | 严重度
三集是否分开 | 否 | 方案称验证集准确率 0.92,但未见测试集单独划分说明,疑似训练集混入验证 | 补充训练/验证/测试划分代码与各集样本数 | 严重
样本量是否支撑置信区间 | 否 | 声称准确率 0.92、95% 置信区间 ±0.01,但测试集样本仅 300 条,区间宽度明显不足 | 补充置信区间计算过程与测试集样本量 | 严重
指标口径 | 部分 | 准确率定义为加权准确率,未说明类别权重来源 | 补充指标定义与权重设定依据 | 中等
数据来源合规 | 部分 | 数据来源为某业务系统导出,未见脱敏与授权说明 | 补充数据授权文件与脱敏处理记录 | 中等
模型卡 | 否 | 未提供模型卡,缺少适用范围与已知局限说明 | 按模板补充模型卡 | 中等
基线对比 | 是 | 已与逻辑回归基线对比,提升 6 个百分点 | — | 轻微
可复现性 | 部分 | 未说明随机种子与环境版本 | 补充运行环境与随机种子设置 | 轻微
核对算法说明:三集是否分开按文档中训练/验证/测试的样本数、划分规则与是否有重叠描述判定;样本量是否支撑置信区间按二项比例置信区间宽度公式估算,若测试集样本量算出的区间宽度大于其声称宽度,则判为不满足。以上结论为初评意见,涉及模型上线与合规判断需由持证或授权评审人员核对后才能用。
点左边「开工 · 直接出成品」,出一份你自己的版本(文字免费)