# 通用临床能力评测集(SHP-MED-07-042) 一套成体系的临床能力评测集,用于测量医疗大模型在本评测集覆盖的五类临床能力域上的表现。每道题标明考的是哪一类临床能力、难度层级,以及在给定证据下能不能答。题目随附证据、参考答案与评分细则,失分按错误类型归类。可用于上线前能力摸底、版本回归,以及多家模型同题比选。 所属体系:医疗模型评测与安全。 实体 9 个:错误类型 · 评测条目 · 证据条目 · 数据质量项 · 参考答案 · 复核记录 · 评分细则 · 来源文书 · 来源沿袭。 字段 58 个(交付范围内的字段总数)。 可获得的业务字段(示例):文书族 · 去标识状态 · 任务类型 · 能力域 · 可答性判定 · 难度分层 · 证据截点 · 证据挂接状态 · 参考答案层级 · 复核状态 · 证据正文 · 证据可用时间 · 计分方法 · 满分点数 · 部分得分规则 · 评分细则状态 · 错误类型 · 错误类型状态 · 答案状态 · 复核时间 · 错误类型标识 · 条目标识 · 数据性质 · 文书标识 · 题干 · 证据标识 · 数据质量项标识 · 问题代码 · 处理方式 · 答案标识 · 参考答案 · 复核标识 · 评分细则标识 · 沿袭标识 · 对象类型 · 对象标识 · 转换规则。 实体关系 1 组:证据条目与参考答案各自成列,按条目标识挂到同一道评测条目。 数据集组织形式:评测条目清单 + 单一条目文件夹(题干、证据、参考答案、评分细则) + 元数据文件。 数据量:按项目商定。 字段范围:按项目的数据来源与加工范围商定。 交付与供应方式:数据集交付:清单 CSV/Parquet + 单一对象文件夹 + Meta.jsonl/Parquet;API 调用;Token 计量;数巨有谱可信数据空间连接器合约使用。 数据取得方式:数据资源持有方书面授权。 数据来源机构:医疗机构(含等级医院、社区医院及康复机构、疾控机构)。 数据加工机构:数巨有谱或数据资源持有方。 数据经营机构:数巨有谱(经营权权利人)。 许可:评估与研究使用许可。 更新日期:2026-08-05。 ## 样例 按能力域各取一条评测条目,拆开看它由哪些部分组成。考查哪一类临床能力、题型与难度定在哪一级;在给定证据范围内能不能答;证据怎么挂接、何时可用;评分细则怎么给分、失分归入哪一类错误。判分口径与复核时点取诊断推理这一条的完整链。题目与参考答案按项目交付,不在公开样例中展示。 ## 使用场景 - 医疗科技企业 · 医疗大模型研发团队|上线前的能力基线摸底与版本回归|获得:可分项、可复跑、能定位到具体能力短板的模型评测基线 - 医院信息部门 · 智能应用选型|院内引入前的模型比选与合同判据|获得:可写进合同、可复算的模型比选口径 - 药械与数字疗法企业 · 产品能力材料|临床能力证据的成套组织与边界披露|获得:可提交、可复核、边界写得清楚的能力证据包 - 高校与科研机构 · 医学人工智能评测研究|评测方法学研究与自建评测集的组织框架|获得:结构清晰、判分可复算的评测方法学研究底座 ## 常见问题 问:通用临床能力评测集包含哪些内容? 答:通用临床能力评测集(SHP-MED-07-042)由评测条目、证据、参考答案、评分细则与错误类型构成,按同一条目标识对齐。能力域覆盖临床知识与术语、病例理解与证据、诊断推理、治疗与风险、医患沟通。条目标明难度层级,以及在给定证据下能否作答。 问:通用临床能力评测集适合做哪些任务? 答:通用临床能力评测集(SHP-MED-07-042)用于医疗大模型上线前的能力摸底、版本迭代后的回归比对,以及多家模型同题比选。它作为独立评测集使用,与训练侧数据隔离。按能力域分项出分,短板落在哪类能力上看得清楚。 问:这套评测集的样例能看到什么?怎么交付? 答:公开样例展示通用临床能力评测集(SHP-MED-07-042)的条目结构:能力域、难度层级、可答性判定、证据挂接与评分细则;题目与参考答案随项目交付。交付形态为条目清单加单一条目文件夹与元数据文件,另支持 API 调用与连接器合约使用。 问:通用临床能力评测集怎么定制?起订量是多少? 答:通用临床能力评测集(SHP-MED-07-042)起订量为 500 道评测条目,范围按单一能力域或全能力域组合确定。任务类型、难度分层比例、可答性构成、评分细则版本与临床科室场景可选配,数据量按项目商定。 问:通用临床能力评测集常和哪些产品一起用? 答:通用临床能力评测集(SHP-MED-07-042)常与纵向病程与时间推理评测集(SHP-MED-07-043)合用,补上时间维度的专项考查。安全侧配医疗安全与红队测试集(SHP-MED-07-047),能力与安全一并测。 ## 关联数据集 - SHP-MED-07-043 纵向病程与时间推理评测集:时间维度上的专项能力评测 - SHP-MED-07-047 医疗安全与红队测试集:与能力评测配套的安全侧测试 - SHP-MED-06-036 临床指令微调训练数据:训练侧对应的指令数据 页面:https://www.shujuyoupu.com/datasets/catalog/products/SHP-MED-07-042/