任务规格 · 按项目核验
查看数据规格 / eval-medical-gate
Medical Gate 私有评测任务规格
本页用于定义采购和生产任务。数量、可用样本、许可、质量指标与交期，经项目核验后写入数据卡和合同；目录条目不代表独立数据资产或现货库存。
候选格式与任务范围
冻结版本、评分细则、访问范围、污染审查和失败分类
独立评测任务与重复运行分别计数
下列为可讨论的规格方向，最终以实际来源、样例核验与项目协议为准。
需要锁定的交付字段
task_idholdout_versionmodel_versionrubric_versionrun_idfailure_categoryreview_statusaccess_scope
计数与质量口径
按病例、检查、文档或玻片约定唯一计数单位；不得将文件数或切片数直接作为病例数。质量指标需注明样本范围、分母、版本与审核状态。
让“可核验”对应具体材料
采购前核对适配性，交付时核对证据。以下材料的内容、可见范围与提交时间，由双方在项目范围中确认。
- 任务与计数
- 对象、模态、入排标准、去重主键与计数单位；病例、检查、序列、切片和标注不得混算。
- 来源与许可
- 来源链路、合法处理依据、委托范围、训练用途、保存期限和再分发限制。脱敏不替代授权。
- 样本与分布
- 可核验样例、关键字段、分层分布和缺失项；样本通过不等于批量已验收。
- 专家与质量
- 领域匹配、审核流程、抽检分母、差异仲裁、返工与最终验收记录。
- 文件与版本
- 相对路径、校验值、版本号、格式检查和图文配对；以验收合格的去重单位结算。
- 评测与隔离
- 冻结题集与评分规则，约定访问权限、污染检查、复测条件和服务角色披露。
评测反馈如何进入下一轮生产
反馈以失败类别和新增任务规范为主；私有留出题及答案不得默认回流训练。若同一服务方同时参与生产和评测，项目协议需披露角色，约定权限、人员与题集隔离，并说明独立性限制。评测支持研发决策，不替代临床验证或监管审批。
带着任务，开始一次可核对的合作
提供任务目标、模态、数据准备情况、验收要求和期望周期即可；请勿在公开表单提交患者信息或原始医疗数据。