主要证据
- miniCTX: Neural Theorem Proving with (Long-)ContextsS1 · 主要研究来源 · 论文 · 2024-08-05
- miniCTX evaluation repositoryS1 · 主要研究来源 · 代码仓库
该基准从真实 Lean 项目和教材中抽取定理,并提供提取新项目上下文的工具。
miniCTX 引入带有可达数万 token 仓库上下文的 Lean 定理证明任务,并显示利用上下文的方法明显优于只看 proof state 的基线。
它更接近实际证明 Agent 在大型形式化代码库中工作的真实条件。
重要性说明:miniCTX 把评测推进到仓库级定理证明:所需定义与引理存在于长篇、训练时未见的上下文中。
Chronicle 依据所引 primary / official source 记录该事件;该状态不表示 Chronicle 已完成独立验证。
本轮 corpus 刷新增补了由作者或发布机构维护、可直接检查的公开产物。E3 表示证据已达到可检查 artifact 层级,并不等同于底层科学或数学主张已获得独立验证。
当前没有记录的更正。