评测数据集 · 实体榜单 · medhallu · GB-Safety
EMNLP 2025:基于 PubMedQA 的幻觉检测,硬幻觉上 GPT-4o 级 F1 仍可约 0.625。 对齐 2026-09-27 前沿评测进展,给出 GB-Safety 映射、字段清单与询盘入口。
English entry: /en/gate/benchmarks/medhallu/
正文约 549 字 · 观测窗口 2026-09-27 · 实体锚定 medhallu
MedHallu(MedHallu)· 观测窗口 2026-09-27。
EMNLP 2025:基于 PubMedQA 的幻觉检测,硬幻觉上 GPT-4o 级 F1 仍可约 0.625。
主映射 SKU:GB-Safety(安全评测集)。相关扩展:—。
参考文献标识:arXiv:2502.14302。
测量面:
产业共识缺口:
完整采购与门禁协议见意图簇文章,并回到类目页 GB-Safety。
| 能力维 | 解读口径 |
|---|---|
| 幻觉检测 F1 | 公开生态可对照;合同验收需私有冻结与字段化。 |
| 难度分层 | 公开生态可对照;合同验收需私有冻结与字段化。 |
| 不确定选项收益 | 公开生态可对照;合同验收需私有冻结与字段化。 |
公开测得到、合同买不到的缺口:
数据集要求字段(可摘抄):
Q:MedHallu主要测什么?
A:幻觉检测 F1;难度分层;不确定选项收益。
Q:为什么不能直接把 MedHallu 当合同门禁?
A:英文语料为主;看起来专业的错误更危险。
Q:采购时应对齐哪些字段?
A:难度层;不确定标签;严重度。
Q:LumeSage 如何映射?
A:公开对照保留为需求地图;付费发生在 GB-Safety 私有层与可审计附件。
Q:观测窗口?
A:2026-09-27;版本与公开材料可能更新,以数据卡为准。