近日,字节Seed团队发现DeepSeek-V4-Flash基础模型存在“周期性弱点”:代码前增加无关Token会导致答案对错周期性切换,这源于其分块KV压缩机制的“相位敏感性”。为此,我们实测了最新的DeepSeek V4.1-Flash。结果显示,模型未再出现答案翻转,64组测试全对,但正确答案的预测概率仍随输入长度波动。据悉,V4.1通过缩小压缩步幅及采用新架构,将KV Cache显存需求降至四分之一,位置弱点差异也从40.2个百分点大幅降至6.1个百分点。该研究揭示了平均分易掩盖新架构局部弱点,也展现了大模型领域架构探索与快速迭代的技术竞赛。
原文链接
本文链接:https://kx.umi6.com/article/38593.html
转载请注明文章出处
相关推荐
换一换
DeepSeek母公司去年进账50亿,够烧2380个R1
2026-01-13 16:43:30
DeepSeek深夜更新后自曝:我是V4(?!)
2026-04-08 12:51:42
大肥鱼遇劲敌:MiniMax M3.1 Flash 拿下 Agent 任务第一,我们实测了
2026-10-21 12:31:51
人类注意力不够用了?DeepSeek决定让AI自己管自己
2026-11-03 07:34:06
DeepSeek扩招!弹性计算团队大量HC,尤其需要资深工程师
2026-10-03 16:27:17
DeepSeek 开源算子工具大礼包,联手华为昇腾,手撕 CUDA 绑定!
2026-09-30 20:02:27
梁文锋出资200亿!DeepSeek首轮创纪录融资500亿,V4.1定档6月
2026-05-09 11:07:00
DeepSeek发布Agent Harness相关岗位 或推智能体产品
2026-05-20 16:47:33
DeepSeek:特殊字符引发模型幻觉 不涉及安全问题或隐私泄露
2026-05-19 19:54:37
梁文锋投了Swin Transformer作者!DeepSeek开始布局具身大脑
2026-10-13 18:25:14
DeepSeek网页版大升级!随后宕机11小时崩上热搜,新模型真的来了
2026-03-30 11:42:07
曾被扒出换皮DeepSeek 日本企业抱团砸万亿日元押注国产AI
2026-04-13 17:10:16
DeepSeek连更GitHub,华尔街回想起被支配的恐惧:“DeepSeek第二时刻”要来了
2026-02-24 13:45:27
741 文章
991475 浏览
24小时热文
更多
-
2026-11-03 12:51:11 -
2026-11-03 11:57:22 -
2026-11-03 11:55:54