当前位置:首页 > Deepseek最新资讯 > 正文内容

超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源

2个月前 (07-31)Deepseek最新资讯197

  该框架创新性地将评估模型置于核心位置。通过强化学习训练的CriticLeanGPT模型,能像数学专家一样精准判断形式化代码是否贴合原始语义,配合迭代优化机制,让生成的定理证明既符合语法规范,又忠实于数学逻辑。

  将自然语言描述的数学命题转化为机器可验证的形式化代码(如Lean 4定理),是自动化定理证明领域的基础性难题,其核心挑战不仅在于语法层面的准确转换,更在于对数学语义的深度理解与忠实还原。

  尽管现有研究在生成模型与编译有效性上取得一定进展,但在复杂问题的语义对齐上仍存在显著瓶颈,具体体现在以下三方面:

  CriticLean框架将引入强化学习的 Critic 模型,通过训练专门的语义评价模型(CriticLeanGPT)、结合 Lean 4 编译器反馈进行迭代生成。系统性解决语义对齐、评价可靠性与数据质量问题,为数学自动化形式化提供了全新范式。

  该模型能识别12类常见错误,包括类型错误(占比24.9%)、数学表示错误(23.8%)等,能够发现“代码编译通过但逻辑偏离原题”的隐性问题。

  CriticLeanBench是用于评估模型在数学形式化任务中关键推理能力的基准测试,旨在全面衡量模型将自然语言数学陈述转化为经形式验证的定理声明等方面的表现.

  CriticLeanBench 在数据收集阶段,从多个数据来源选取数学陈述及对应的Lean 4 陈述,提交Lean 4陈述到编译器。1)对于编译失败的语句,随机采样保留编译器反馈信息。2)对于编译成功的部分,通过使用 DeepSeek R1 结合专家校验的方式保留正确和错误的样本(错误的样本保留错误信息)。

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  将该框架应用于自动形式化流程,配合Kimina-Autoformalizer-7B生成器,准确率从38%(单轮生成)提升至84%(多轮迭代优化),其中语义评估环节贡献了30个百分点的提升。

  特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

标签: deepseek

“超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源” 的相关文章

DeepSeek“带飞”国产算力板块,寒武纪市值超5000亿元,摩尔线程已支持F

DeepSeek“带飞”国产算力板块,寒武纪市值超5000亿元,摩尔线程已支持F

  8月22日,国产算力产业链起飞。算力芯片厂商寒武纪(688256)、海光信息(688041)、云天励飞(688343)均20CM涨停deepseek,其中寒武纪市值突破5200亿元,海...

91岁作家王蒙玩转DeepSeek

91岁作家王蒙玩转DeepSeek

  【#91岁作家王蒙玩转DeepSeek#】近日,@人民日报 记者采访了著名作家、“人民艺术家”王蒙。从19岁创作《青春之歌》,到改革开放后尝试意识流写作,从最早使用电脑写作到如今玩转D...

DeepSeek-R2要来了?速领450元代金券,模型测评快人一步!

DeepSeek-R2要来了?速领450元代金券,模型测评快人一步!

  近日,关于DeepSeek-R2计划于8月15日至30日之间发布的消息,在市场上引起了广泛关注。对此,也有接近DeepSeek人士表示该消息不实,DeepSeek-R2在8月内并无发布...

Deepseek推荐全国旅游百强区第30名:广西北海市银海区

Deepseek推荐全国旅游百强区第30名:广西北海市银海区

  日前,全国县镇发展研究课题组、天和经济研究所县镇发展研究院联合发布了2024《全国县镇发展报告》deepseek,报告评价篇对全国县市以及包含乡村人口的市辖区旅游发展水平进行了综合评价...

智能体迎来“DeepSeek时刻”,为何主角是纳米AI?

智能体迎来“DeepSeek时刻”,为何主角是纳米AI?

  在这背后,并非其技术力量不足,而是当前的应用形态仍停留在“工具赋能”的初级阶段,大模型的潜力被束缚在碎片化场景中,未能转化为重构生产逻辑的核心动能。   正如360集...

曼联vs伯恩茅斯友谊赛官方集锦

曼联vs伯恩茅斯友谊赛官方集锦

  重点表扬霍伊伦,第一个进球会绕前跑位了,然后支点作用做得也很出色,第三个进球也有大部分功劳。如果状态能持续下去,最强中锋已在阵中,还买什么赛斯克?   重点表扬霍伊伦...