Epoch AI精选AI 评分 94
Epoch AI 用 GPT-5.5 辅助审计 FrontierMath,发现约三分之一题目存在 fatal errors
Epoch AI 在 5 月 11 日宣布对 FrontierMath: Tiers 1-4 进行 AI-assisted review,称约三分之一问题被标记为存在 fatal errors,并认为大部分标记有效;公开讨论还披露初始问题发现主要由 OpenAI GPT-5.5 辅助完成。Epoch 随后启动全面人类复核,并计划在修正数据集上重新发布模型成绩。
推荐理由:这是 AI4Math benchmark governance 的关键事件:模型不只被评测,还反过来发现 benchmark 本身的大规模 specification / ground-truth 错误,直接影响所有后续 frontier-math capability claims。
阅读原始来源 ↗