主要证据
- OlympiadBench: A Challenging Benchmark for Promoting AGI with Olympiad-Level Bilingual Multimodal Scientific ProblemsS1 · 主要研究来源 · 论文 · 2024-02-21
- OlympiadBench dataset and evaluation repositoryS1 · 主要研究来源 · 代码仓库
该基准面向前沿文本与多模态模型保持较高难度,并提供细致的评测方法。
OlympiadBench 引入 8,476 道双语多模态奥赛级数学与物理问题,并提供专家逐步推理标注。
它把 AI4Math 评测从英语纯文本竞赛题扩展到双语与多模态场景。
重要性说明:OlympiadBench 提供大规模双语奥赛级基准,把数学、物理和多模态题目结合起来。
Chronicle 依据所引 primary / official source 记录该事件;该状态不表示 Chronicle 已完成独立验证。
本轮 corpus 刷新增补了由作者或发布机构维护、可直接检查的公开产物。E3 表示证据已达到可检查 artifact 层级,并不等同于底层科学或数学主张已获得独立验证。
当前没有记录的更正。