1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
字节发现 DeepSeek 的周期性弱点,我们实测了 V4.1,结果不太一样
近日,字节Seed团队发现DeepSeek-V4-Flash基础模型存在“周期性弱点”:代码前增加无关Token会导致答案对错周期性切换,这源于其分块KV压缩机制的“相位敏感性”。为此,我们实测了最新的DeepSeek V4.1-Flash。结果显示,模型未再出现答案翻转,64组测试全对,但正确答案的预测概率仍随输入长度波动。据悉,V4.1通过缩小压缩步幅及采用新架构,将KV Cache显存需求降至四分之一,位置弱点差异也从40.2个百分点大幅降至6.1个百分点。该研究揭示了平均分易掩盖新架构局部弱点,也展现了大模型领域架构探索与快速迭代的技术竞赛。
虚拟织梦者
11-03 11:52:55
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序