主要证据
- Autoformalization with Large Language ModelsS1 · 主要研究来源 · 论文 · 2022-05-25
- Autoformalization with Large Language Models — NeurIPS 2022S1 · 主要研究来源 · 论文
- Autoformalization with Large Language ModelsS2 · 官方机构来源 · 官方公告
研究者通过 few-shot prompting 让大语言模型把非形式化数学陈述翻译为 Isabelle/HOL,并将生成的形式化结果进一步作为神经定理证明器的训练数据,把自然语言翻译与形式证明搜索连接到同一流程中。
论文报告称,大语言模型能够将抽样数学竞赛题中的 25.3% 正确翻译为 Isabelle/HOL 形式规范;使用自动形式化生成的定理训练神经定理证明器后,其 miniF2F 证明率从 29.6% 提升到 35.2%。
这一结果较早建立了现代语言模型与证明助手之间的经验性桥梁:自动形式化不仅以翻译准确率评估,而且被证明能够生成可提升下游证明器的数据,成为后来自动形式化基准与合成形式数学管线的重要前序。
重要性说明:该工作较早建立了从非形式化竞赛数学到证明助手形式规范的大语言模型路线,并展示生成的形式陈述可以提升后续定理证明,使自动形式化成为更具体的 AI4Math 研究方向。
研究论文公开报告了 Isabelle/HOL 自动形式化与 miniF2F 结果。E2 表示已有公开研究记录,并不意味着已经获得独立复现或验证。
当前没有记录的更正。