1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
微软1bit LLM新研究:原生4bit激活值量化,可充分利用新一代GPU对4bit计算的原生支持
微软发布BitNet v2框架,实现1 bit LLM的原生4 bit激活值量化,以充分利用新一代GPU(如GB200)的4 bit计算能力,减少内存带宽并提升计算效率。此前,微软的BitNet b1.58将权重量化至1.58-bit,但激活值仍为8-bit,无法充分发挥硬件潜力。此次研究针对注意力...
AI奇点纪元
04-30 18:51:55
1bit LLM
BitNet v2
微软
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序