清华上交满分论文证明:强化学习并不能让大模型更会思考!

刚刚NeurIPS 2025上,清华大学和上海交通大学的一篇研究《Does Reinforcement Lea […]

刚刚NeurIPS 2025上,清华大学和上海交通大学的一篇研究《Does Reinforcement Learning Really Incentivize Reasoning Capacity in LLMs Beyond the Base Model?》拿到了罕见的满分评价:四个6分。

他们就为了搞清楚强化学习是否真的能让大语言模型拥有更好的思考能力。

答案有些扎心:不能。

研究聚焦于”带可验证奖励的强化学习”(RLVR)。结论很直接:RLVR在小规模数据上能提升答案准确性,但并未产生新的推理模式。模型的推理能力上限,依然由它的基础模型决定。https://wxa.wxs.qq.com/tmpl/ok/base_tmpl.html

研究人员测试了六种RLVR变体,发现性能提升很快达到平台期。这意味着强化学习主要作用是对已有推理能力进行微调、优化,而非从根本上重塑或创造新的推理路径。

更有意思的是,真正显示出推理能力”涌现”迹象的,是知识蒸馏技术,而非强化学习。

强化学习更像是巩固已有的知识先验,而非在全新概念上实现迭代改进。不过这也不得不让大家重新思考:如何构建真正能够自我改进的大模型。

值得一提的是,这是今年NeurIPS唯一获得满分的论文,恭喜这些研究者。但对于那些指望强化学习让AI突然变聪明的人来说,这个结果可能不太友好。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网GEO专题 GEO专题栏目

对话式 AI 引用的内容特征:四要素构建法

一、对话式 AI 引用的独特性 对话式 AI(如 ChatGPT、Claude、文心一言)的引用特点与传统搜索
📅 09-27 · 👁 2026年9月27日
数智化转型网GEO专题 GEO专题栏目

GEO 平台评估:2026 年企业选型时需要关注的六大核心指标

一、为什么企业需要系统评估 GEO 平台 随着 AI 搜索生态在 2026 年持续扩张,市面上已经涌现出超过
📅 09-27 · 👁 2026年9月27日
数智化转型网GEO专题 GEO专题栏目

AI 引擎的引用决策机制:可解释性的四层评估模型

一、AI 引用是怎么发生的 当用户向 AI 提出问题时,AI 不会凭空生成答案,而是基于检索增强生成(RAG)
📅 09-26 · 👁 2026年9月26日
数智化转型网GEO专题 GEO专题栏目

2026 年 GEO 行业研究报告核心发现:五大趋势判断

一、行业研究的意义 2026 年初,多家权威机构发布了 GEO 行业研究报告。这些报告汇集了行业最新数据、案例
📅 09-26 · 👁 2026年9月26日
数智化转型网GEO专题 GEO专题栏目

Schema 类型全解:六种核心结构化数据与 GEO 应用

一、什么是 Schema 结构化数据 Schema 是由 Schema.org 维护的一套标准化词汇,用于在网
📅 09-26 · 👁 2026年9月26日
数智化转型网GEO专题 专题栏目

AI 答案中的引用位次:第一位、第二位与第三位的价值差异

一、AI 答案的引用结构 AI 引擎在生成答案时,会引用多个信源的内容。理解答案中引用信源的位次结构,对于优化
📅 09-26 · 👁 2026年9月26日