1
免责声明：Al优秘圈所有资讯仅代表作者个人观点，不构成任何投资理财建议。请确保访问网址为（kx.umi6.com) 投诉及建议
2025-02-12 13:32:45
豆包提出全新稀疏模型架构 UltraMem，推理成本较 MoE 最高可降 83%
超频思维站
发布在
快讯
阅读：1012

2月12日，字节跳动豆包大模型团队宣布提出全新稀疏模型架构UltraMem。该架构解决了MoE在推理时高额访存问题，速度提升2-6倍，成本最高可降低83%。UltraMem在同等计算资源下实现了业界领先的推理速度和模型性能，且在参数和激活条件下超越了MoE。该架构在Transformer架构下表现出优异的Scaling特性，为构建大规模模型开辟新路径。

原文链接
本文链接：https://kx.umi6.com/article/13205.html
转载请注明文章出处
MoE
UltraMem
推理成本
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
刚刚，全球首个具身专属的MoE视频模型，开源了！
2026-07-09 14:03:20
推理成本打到1元/每百万token，浪潮信息撬动Agent规模化的“最后一公里”
2025-12-26 15:45:08
114B参数、6B激活，Sand.ai刚刚开源全球首个千亿MoE视频生成模型
2026-08-05 15:52:17
对话蜜度CTO刘益东：价格战、MoE......中国AI大模型下一步“卷”什么？
2024-07-05 20:47:52
腾讯推出 Hunyuan-Large 大模型：389B 总参数，业界已开源基于 Transformer 的最大 MoE 模型
2024-11-05 17:04:28
李飞飞实验室2025 AI报告出炉：AI推理成本降低至1/280
2025-04-08 23:18:28
模型推理成本下降最高99%！百川智能发布一站式大模型商业化解决方案
2024-10-31 15:55:01
豆包又把算力成本“打了下来” 但压力才刚刚开始
2025-02-12 19:41:14
每2秒吃透一道高数大题！华为终于揭秘准万亿MoE昇腾训练系统全流程
2025-05-30 16:54:34
MoE 高效训练的 A/B 面：与魔鬼做交易，用「显存」换「性能」
2024-06-07 18:18:13
字节跳动最新思考模型将于4月17日供用户体验 单位推理成本相比DeepSeek R1降低50%
2025-04-14 12:33:19
腾讯放大招，超Meta！史上参数最大，开源专家混合模型
2024-11-07 10:59:44
DeepSeek开源第二弹，为MoE和EP量身定制的通信库！暂和英伟达显卡绑定
2025-02-25 11:49:28
超频思维站
848 文章
1038998 浏览
阅读更多
24小时热文
更多
扫一扫体验小程序