1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议

标题:新研究揭示DeepSeek弱点:频繁切换思路欠思考,最短答案往往就对

最新研究揭示,推理大模型在面对难题时可能频繁切换解题思路,导致“欠思考”。腾讯AI实验室、苏州大学和上海交大的研究团队分析了开源的DeepSeek-R1和Qwen QwQ系列模型。研究发现,模型在思考初期常走上正确路径,却很快转向其他思路,浪费计算资源,降低正确率。

尤其在解决数学竞赛题时,类o1模型在错误回答中消耗的token比正确回答多225%,思维切换频率增加418%。研究团队开发评估框架,发现许多错误回答中包含正确的思路,但模型未深入探索。

基于这些观察,研究人员提出了Underthinking Metric,评估模型推理效率。实验显示,所有测试模型均存在思维不足问题,尽管DeepSeek-R1-671B在某些数据集上表现更优,但其思维不足问题也更严重。

为解决这一问题,研究者提出“思路切换惩罚机制”(TIP),减少无效切换,提高准确率。在AIME2024测试中,加入TIP的QwQ-32B-Preview模型准确率从41.7%提升至45.8%,UT Score从72.4降至68.2。

此外,UC Berkeley教授Alex Dimakis提出“简洁解码”,通过选择token最少的答案,提高准确率,且无需重新训练模型。

原文链接
本文链接:https://kx.umi6.com/article/12495.html
转载请注明文章出处
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
涨价浪潮下 DeepSeek推动AI“价格战”:百万Token输入0.25元
2026-04-26 10:07:20
用DeepSeek网页版就能瓜分鹅厂600万??!
2026-08-19 16:41:16
DeepSeek豪掷1.4亿护航宇树IPO,杭州绝代双骄战略合体
2026-08-07 09:09:17
DeepSeek低价风暴打服硅谷!海外平台争相倒贴V4 Flash
2026-08-04 17:00:24
DeepSeek组建Harness团队,非「超能力者」不要?中国AI开启「做产品」的关键一跳
2026-05-21 18:58:24
硅谷巨头集体掉队!DeepSeek登顶全球大模型调用榜:国产AI包揽前五
2026-08-03 18:12:04
DeepSeek网页及API服务中断
2026-05-28 11:19:14
字节发现 DeepSeek 隐藏 Bug,加点空格,模型翻车
2026-10-10 20:44:35
被315点名的万亿隐秘生意:“污染”DeepSeek
2026-03-16 18:20:37
DeepSeek扩招!弹性计算团队大量HC,尤其需要资深工程师
2026-10-03 16:27:17
DeepSeek启动首次外部融资?最新消息来了
2026-04-18 22:26:47
2026年,1800个DeepSeek跟我一起守护艾泽拉斯
2026-06-21 12:52:54
DeepSeek发布Agent Harness相关岗位 或推智能体产品
2026-05-20 16:47:33
24小时热文
更多
扫一扫体验小程序