1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议

正文:11月20日,蚂蚁集团宣布开源万亿参数强化学习高性能权重交换框架Awex。该框架专为解决RL训练中权重参数同步问题设计,可在秒级完成TB级大规模参数交换,显著降低训练延迟。其主要特点包括极速同步性能(千卡集群6秒内全量同步)、统一模型适配、零冗余传输、多模式传输支持及异构部署兼容等。Awex由WeightWriter、WeightReader和MetaServer三大组件构成,核心功能模块涵盖训推权重转换、元数据计算与交换、P2P传输计划及NCCL/RDMA传输。在千卡集群上,使用RDMA传输1TB模型权重仅需6秒。目前,Awex已支持Megatron和SGLang引擎,并计划未来开源ASystem的其他核心RL组件,进一步完善强化学习生态。

原文链接
本文链接:https://kx.umi6.com/article/28770.html
转载请注明文章出处
分享至
打开微信扫一扫
内容投诉
生成图片
相关推荐
换一换
突破Agent长程推理效率瓶颈!MIT&NUS联合推出强化学习新训练方法
2025-08-22 16:50:16
Cursor发布首个编程大模型!代码生成250tokens/秒,强化学习+MoE架构
2025-10-30 10:33:49
蚂蚁集团发布万亿参数旗舰模型 Ling-1T 并开源,多项指标位居开源模型榜首
2025-10-11 09:36:05
蚂蚁集团与华西医院合作:探索 AI 医疗,改善患者就医、支付体验
2025-11-09 14:31:27
Thinking Machine新研究刷屏!结合RL+微调,小模型训练更具性价比
2025-10-28 10:41:47
蚂蚁集团CEO韩歆毅:在医疗健康领域 专业AI做到极致会更强
2025-09-11 17:05:26
蚂蚁发布AI健康应用AQ 打通华为、vivo、鱼跃等智能硬件
2025-06-26 15:00:09
蚂蚁集团发布 AI 健康应用 AQ:可看病症、看医生、看报告
2025-06-26 15:59:36
上交博士最新思考:仅用两个问题讲清强化学习
2025-11-10 18:29:12
字节&MAP重塑大模型推理算法优化重点,强化学习重在高效探索助力LLM提升上限
2025-08-11 10:59:04
无需外部数据!AI自问自答实现推理能力进化
2025-08-08 16:13:47
蚂蚁集团百灵万亿参数模型「Ling-1T」上架华为云,支持专属资源部署
2025-10-18 20:38:01
卡帕西:强化学习很糟糕,但其他所有方法都更糟
2025-10-18 15:34:39
24小时热文
更多
扫一扫体验小程序