1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
MIT:GPT-6 Astra能直接修改Qwen权重,数学能力暴涨6倍
近日,MIT团队提出“权重空间编程”新范式,引爆大模型圈。实验显示,GPT-6 Astra无需传统训练与梯度下降,可直接读取并编辑小模型权重。在优化0.8B参数的Qwen3.5时,Astra仅修改其0.016%的权重,便精准修复推理循环问题,使其MATH-500数学得分从7.9%飙升至48.1%,能力暴涨约6倍,指令执行能力亦提升3倍。此外,Astra还能通过权重识别模型所学语言与游戏,甚至从零生成小游戏网络权重,得分超PPO训练5亿步基线20倍。这展示了前沿大模型直接改写小模型权重的巨大潜力,未来优化小模型或直接“改权重”即可。
灵感Phoenix
11-03 10:42:37
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序