# 独立测试与外部验证数据(SHP-MED-07-049) 一份封存后方启动评测的独立验证数据集。数据从哪个队列、哪些站点来,独立到什么程度,都在发布里声明清楚。划分按主体隔离。每条题目附训练暴露记录与重复泄漏检查,回答「这道题会不会已经被训练见过」。出分按任务域与亚组分别汇总,数据卡写明预期用途与不可外推的限制。用于注册与临床评价材料,也可用于院内引入前的独立评估。 所属体系:医疗模型评测与安全。 实体 21 个:数据卡 · 重复泄漏检查 · 评测运行 · 验证条目 · 参考答案 · 条目结果 · 分域指标 · 数据质量项 · 复核记录 · 评分点 · 评分细则 · 封存清单 · 来源队列 · 来源沿袭 · 来源站点 · 划分清单 · 亚组指标 · 任务载荷 · 训练暴露记录 · 验证数据集发布 · 验证受试对象。 字段 112 个(交付范围内的字段总数)。 可获得的业务字段(示例):预期用途 · 使用限制 · 发布状态 · 发布版本 · 独立性状态 · 站点状态 · 隔离层级 · 数据划分状态 · 封存状态 · 封存对象清单 · 对象状态 · 附件位置 · 任务域 · 输入正文 · 输入形态 · 任务截点 · 参考答案性质 · 参考正文 · 运行状态 · 运行时间 · 评分 · 判分状态 · 指标名称 · 指标值 · 亚组名 · 判定依据 · 暴露状态 · 检查规则 · 重复状态 · 泄漏状态 · 评分方法 · 标准正文 · 满分 · 复核状态 · 复核版本 · 处理方式 · 问题代码 · 数据卡标识 · 发布标识 · 数据性质 · 检查项标识 · 条目标识 · 运行标识 · 主体标识 · 任务载荷标识 · 金标准标识 · 评分细则标识 · 条目状态 · 结果标识 · 指标标识 · 数据质量项标识 · 复核标识 · 对象标识 · 评分点标识 · 封存标识 · 封存摘要 · 队列标识 · 沿袭标识 · 对象类型 · 来源定位 · 转换规则 · 站点标识 · 数据划分标识 · 亚组结果标识 · 暴露标识。 实体关系 2 组:一次发布连接来源队列、来源机构类型、受试对象与数据划分。同一发布另连任务、评测运行、指标、封存清单与数据卡 · 每个条目连接实际任务载荷、参考答案、评分点、训练暴露登记与重复泄漏检查。 数据集组织形式:发布清单 + 单一发布文件夹 + 元数据文件;发布文件夹内含划分与封存清单、任务载荷、参考答案、评分细则、运行与指标、数据卡。。 数据量:按项目商定。 字段范围:按项目的数据来源与加工范围商定。 交付与供应方式:数据集交付:清单 CSV/Parquet + 单一对象文件夹 + Meta.jsonl/Parquet;API 调用;Token 计量;数巨有谱可信数据空间连接器合约使用。 数据取得方式:数据资源持有方书面授权。 数据来源机构:医疗机构(含等级医院、社区医院及康复机构、疾控机构)。 数据加工机构:数巨有谱或数据资源持有方。 数据经营机构:数巨有谱(经营权权利人)。 许可:评估与研究使用许可。 更新日期:2026-08-05。 ## 样例 一个已封存的验证数据集发布:声明来源队列与站点的独立性状态、划分做到哪一层隔离。逐条任务载荷带自己的证据截点与参考答案。每条另附训练暴露记录与重复泄漏检查,说明它是否可能已被评测对象在训练阶段见过。一次参照复放(把封存内容原样跑一遍)按条目出结果,再汇总成分域与亚组指标。数据卡写明本发布的预期用途与不可外推的限制。 ## 使用场景 - 医疗科技企业 · 产品注册与临床评价准备|验证流程的成套接入与封存留档|获得:封存、隔离与防泄漏成套留痕的验证材料底座 - 医院与区域医疗机构 · 引入前的独立评估|自带数据接入现成的评测口径|获得:自带数据可直接接入、亚组差异看得见的独立评估流程 - 多中心研究协调方 · 验证数据集组织|跨来源汇集时的隔离与封存约定|获得:隔离层级与封存范围都可核对的多中心组织约定 - 第三方评测机构与高校 · 评测方法学研究|自评乐观偏差的来源拆解|获得:可拆解自评乐观偏差来源的评测方法学底座 ## 常见问题 问:独立测试与外部验证数据包含哪些内容? 答:独立测试与外部验证数据(SHP-MED-07-049)是一份封存后方启动评测的外部验证集。数据来自哪个队列、哪些站点,独立到什么程度,都在发布里声明;划分按主体隔离。每条题目附训练暴露记录与重复泄漏检查。 问:外部验证数据适合做什么? 答:独立测试与外部验证数据(SHP-MED-07-049)用于产品注册与临床评价材料准备,也可用于院内引入前的独立评估。它与训练侧数据按主体隔离,出分按任务域与亚组分别汇总,数据卡写明预期用途与不可外推的限制。 问:样例和交付形态是什么样的? 答:公开样例展示独立测试与外部验证数据(SHP-MED-07-049)的发布结构:划分与封存清单、任务载荷、评分细则、运行与指标、数据卡;参考答案随项目交付。交付为发布清单加单一发布文件夹与元数据文件,另支持 API 调用。 问:起订量是多少?可以怎么定制? 答:独立测试与外部验证数据(SHP-MED-07-049)起订量为 300 条验证条目,范围按单一任务域或全任务域组合确定。来源队列构成、隔离层级要求、任务载荷形态、指标与亚组口径、封存与复放频次可选配。 问:和哪些产品配合使用? 答:独立测试与外部验证数据(SHP-MED-07-049)可接入通用临床能力评测集(SHP-MED-07-042)的条目做封存复放。接入与流程联调阶段,可先用结构化电子病历合成数据(SHP-MED-09-056)跑通链路。 ## 关联数据集 - SHP-MED-07-042 通用临床能力评测集:可接入本发布复放的能力评测条目 - SHP-MED-07-048 医疗隐私、公平性与鲁棒性评测集:同批交付的隐私与公平性侧评测 - SHP-MED-09-056 结构化电子病历合成数据:可用于接入与流程联调的合成数据 页面:https://www.shujuyoupu.com/datasets/catalog/products/SHP-MED-07-049/