北大团队发现,输入看似普通的一句话,R1模型便无法停止推理,持续输出。例如,“树中两条路径之间的距离”这句话,会导致R1陷入无尽循环,直到达到最大Token限制。这种现象还出现在由R1蒸馏的Qwen模型上。
研究者们发现,一些乱码也能使R1无休止地思考,这表明模型对某些类型的输入缺乏防御。在测试中,尽管未完全复现死循环,但某些模型的思考时间长达11分钟,生成超过2万字。团队在本地部署Qwen-1.5B模型,发现其在过度思考时几乎占满GPU资源,若被恶意利用,相当于对推理模型的DDoS攻击。
此外,北大团队认为,该现象可能与模型的强化学习过程有关。模型倾向于进行长时间推理以获取奖励,即使面临模糊问题。短期内,限制推理时间和Token数量可能是有效的应对策略,但长期解决方案还需深入研究。
这一问题引起了广泛关注,有兴趣的读者可访问GitHub获取更多信息。
原文链接
本文链接:https://kx.umi6.com/article/14540.html
转载请注明文章出处
相关推荐
换一换
豆包升级了“眼睛”,看APP截图就能写代码了!超低价让多模态AI普惠
2024-12-19 20:04:18
R2模型呼之欲出,「卷王」DeepSeek继续给巨头上压力
2025-02-28 17:17:31
腾讯元宝、微信、ima、QQ 浏览器等产品接入 DeepSeek-R1 模型
2025-02-17 16:54:06
对话智源研究院副院长林咏华:当下已进入语言模型深水区 预计2025年会出现更多新的多模态模型
2024-12-20 16:36:40
华泰证券:云厂AI算力自用需求或超预期
2024-05-24 10:48:09
100+大模型综测结果出炉!智源发布FlagEval“百模”评测结果,覆盖文本语音图片视频多种模态
2024-12-19 18:01:31
一文讲透Agent的底层逻辑
2025-10-22 22:53:19
字节、腾讯、阿里,AI 编码「三国杀」
2025-07-25 15:26:00
硅谷震惊:DeepSeek或彻底改变游戏规则
2025-01-26 17:18:08
大模型大降价!字节阿里百度腾讯带头开卷!
2024-05-24 00:09:17
一说AI会思考,祖师爷图灵就发笑:这个问题无意义,不值得讨论
2024-06-07 20:31:06
国内大模型接连降价,李开复表态技术为先:宁走国外市场,也不参与“价格战”
2024-05-23 19:14:09
DeepSeek的“服务器繁忙”让所有人抓狂,背后究竟是怎么回事
2025-02-13 10:59:42
682 文章
699288 浏览
24小时热文
更多
-
2026-07-06 19:46:19 -
2026-07-06 19:44:47 -
2026-07-06 18:49:53