1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议

英伟达最新GPU算力逆天,但在训练MoE(混合专家)大模型时,GPU间传数据仍会“堵车”。MoE模型像个大餐厅,数据需动态分配给不同GPU上的“专家”。传统的“主动推送”方式需要复杂的协调与同步等待,导致GPU经常闲置。

为此,Cursor开源了MoK技术,重写GPU底层工作流。首先,改“推”为“拉(Pull)”,让目标GPU主动去取数据,省去繁琐协调,将同步延迟从103微秒暴降至18微秒。其次,MoK把“传数据”和“算数据”塞进同一个内核,精准分配资源,让通信和计算无缝重叠、同时干活。此外,它还引入环形缓冲区等机制,优化显存与计算节奏。

这套“微操”效果显著:在英伟达GB300集群上,MoK让端到端单卡训练吞吐量大幅提升约41%。

这揭示了一个真相:硬件再快,也救不了低效的软件调度。如今的AI竞争已卷到底层,未来决定AI公司实力的,不仅是拥有多少数据,更是其代码能多深地扎进硬件底层。

原文链接
本文链接:https://kx.umi6.com/article/37638.html
转载请注明文章出处
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
AI 编程神器 Cursor 1.0 发布:BugBot 代码审查、Memories 记忆、一键 MCP 安装等
2025-06-05 11:50:32
Cursor自研模型反超Opus 4.6!价格脚踝斩,氛围编程沸腾了
2026-03-20 12:25:37
AI 编程工具 Cursor 定价调整引用户不满,CEO 公开致歉并承诺退款
2025-07-08 15:49:13
12名工程师,估值190亿,AI黑马的梦幻故事
2025-01-15 14:33:04
AI编程在硅谷杀疯了,但国内还长得出自己的Cursor么
2024-11-25 11:11:58
收入4个月涨2倍,“最火AI编程神器”Cursor估值达百亿美元
2025-03-10 09:26:47
马斯克Grok 4.6重回一梯队!更低价格反超Fable 5,这Cursor是真没白收购
2026-08-13 20:35:14
AI 编程神器 Cursor 估值一年狂飙近 12 倍,谷歌、英伟达排队“送钱”
2025-11-14 23:19:16
AI编程等待“失控”
2025-06-01 16:22:14
刚刚,Cursor彻底消失!
2026-08-18 19:58:23
Cursor会是AGI吗?
2024-11-27 18:01:28
OpenAI 投的代码工具 Cursor“叛变”了:默认使用 Claude,程序员叫好
2024-08-16 07:01:25
GitHub把OpenAI当备胎,Copilot接入Claude+Gemini,网友:Cursor的商业模式没了
2024-10-30 11:00:09
24小时热文
更多
扫一扫体验小程序