主要证据
- TacticZero: Learning to Prove Theorems from Scratch with Deep Reinforcement LearningS1 · 主要研究来源 · 论文 · 2021-02-19
- TacticZero: Learning to Prove Theorems from Scratch with Deep Reinforcement LearningS1 · 主要研究来源 · 论文
该系统把证明搜索整体表述为端到端强化学习问题,并引入回溯机制,使智能体能够放弃预测为死路的推导并从更有希望的分支继续搜索。最终证明在 HOL4 内构造,因此仍接受证明助手内核检查。
TacticZero 将 HOL4 交互式定理证明建模为马尔可夫决策过程,并以深度强化学习从零训练搜索、tactic 与参数预测智能体;作者报告该系统在留出问题上优于 HOL4 中已有的 hammer 自动证明器。
它展示了强化学习能够在成熟交互式证明器内部同时学习证明搜索控制与证明动作,为后续自我改进和搜索驱动的神经定理证明系统提供了早期范式。
重要性说明:TacticZero 建立了一条具有代表性的强化学习定理证明路线:端到端智能体直接在证明助手环境中学习证明搜索、tactic 选择及参数,而不依赖专家证明的模仿学习数据,成为早期神经交互式定理证明的重要系统之一。
公开研究记录描述了 HOL4 系统及其留出定理证明结果。machine_checked 仅指在 HOL4 内构造的证明接受内核检查,并不表示论文所报告的基准性能已经得到独立复现。
当前没有记录的更正。