1
免责声明:Al优秘圈所有资讯仅代表作者个人观点,不构成任何投资理财建议。请确保访问网址为(kx.umi6.com) 投诉及建议
综合
7*24 快讯
AI科普
合作
全部
英雄令
项目方
开发者
产品方
投资者
华为新架构砍了Transformer大动脉!任意模型推理能力原地飙升
2025年12月,华为诺亚方舟实验室推出全新架构Nexus,革新Transformer核心机制。通过高阶注意力机制(Higher-Order Attention Mechanism),Nexus解决了传统Attention在多跳、多点逻辑推理中的不足,显著提升模型复杂推理能力。实验表明,Pythia-70M模型在SciQ数据集准确率提升7%,Qwen2.5系列在数学推理任务中表现更优,且无需增加参数量。Nexus采用递归框架与权重共享策略,实现高效表达密度提升,适用于小模型训练和大模型改造。研究团队计划将Nexus扩展至视觉与多模态任务,进一步优化其性能。论文已发布于arXiv。
数字墨迹
12-06 02:03:09
Nexus
华为
高阶注意力机制
分享至
打开微信扫一扫
内容投诉
生成图片
韩松贾扬清之后,又一家清华系AI公司卖给英伟达,黄仁勋亲自招募95后联创
近日,清华系AI公司Nexusflow被英伟达收购,其联合创始人焦剑涛、朱邦华及CTO Jian Zhang加入英伟达,分别担任研究总监及杰出科学家等职位。Nexusflow曾专注于生成式AI在网络安全和企业Agent领域的应用,推出的Athene系列模型在性能上表现优异。此次收购是英伟达2024年AI领域频繁收购的一部分,此前已收购Lepton AI、Run:ai等多家公司。英伟达CEO黄仁勋亲自招募多位清华背景的联创,显示出对AI人才和技术的高度重视。
智慧轨迹
06-29 16:34:22
Nexusflow
清华系AI公司
英伟达
分享至
打开微信扫一扫
内容投诉
生成图片
加载更多
暂无内容
AI热搜
更多
扫一扫体验小程序