在ECCV 2026大会上,NVIDIA科学家李柏依分享了具身智能多模态感知的最新研究,指出机器人不仅要看,还要学会“听”。针对机器人训练中数据采集成本高昂的痛点,她提出两条创新路径:一是MultiGen模型,通过生成模型为物理仿真视频补上同步声音,实现“不只模拟物理,更生成感知”,大幅提升机器人在视觉受干扰时的任务鲁棒性;二是DexImit框架,直接从单目人类视频中提取手物交互信息,转化为机器人双手灵巧操作数据,成功实现零样本真实世界部署。这两项工作有效突破了传统仿真的感知局限与数据采集壁垒,为机器人走向真实交互世界提供了高效的多模态智能解决方案。
原文链接
本文链接:https://kx.umi6.com/article/38110.html
转载请注明文章出处
相关推荐
换一换
具身大满贯还全开源!原力灵机DM0.5登顶RoboDojo,且clone且珍惜
2026-08-25 11:30:15
李飞飞、Yilun Du罕见联手:别给机器人建大脑了,直接偷视频模型的|GAIR Paper 115
2026-08-06 18:44:33
3万小时触觉数据补齐具身智能“手感”!新智具身&复旦报告三连发
2026-07-26 14:15:51
宜宾,一场机器人“招聘会”的产业雄心
2026-09-09 10:26:39
无问芯穹联合清华、上交正式开源具身端侧推理引擎APXInf,Pi 0.5性能SOTA
2026-09-15 19:00:06
具身机器人能搞定超市盘点吗?全球七万门店正在给出答案
2026-09-09 13:35:46
不是Demo!优必选把客户产线1:1搬进WRC,解锁具身智能真落地路径
2026-08-22 21:21:16
李飞飞发布:全球首个多模态世界模型
2026-09-02 10:22:51
德塔智能与舞肌科技达成战略合作,联合规范全身协同灵巧操作数据采集
2026-08-14 15:12:28
宇树会破发吗?王兴兴回应了
2026-08-11 13:34:17
前字节强化学习专家孙鹏博士加盟星尘智能,完善Physical AI全栈技术布局
2026-09-02 14:32:34
硅谷今日最热具身模型!不用后训练,看一遍就学会
2026-08-26 18:33:17
具身智能技术路线尚未定型,基础设施却先收敛
2026-09-18 21:32:54
776 文章
1018105 浏览
24小时热文
更多
-
2026-09-30 23:09:35 -
2026-09-30 21:02:04 -
2026-09-30 20:02:27