标题:上海AI实验室推出首个「通才」机器人大脑:看懂世界+空间推理+精准操控全搞定
正文:机器人的新大脑框架来了!上海人工智能实验室联合多家机构提出了全新通用具身智能大脑框架——Visual Embodied Brain(简称VeBrain)。该模型通过整合视觉感知、空间推理和机器人控制能力,使机器人能够像人类一样“看到-思考-行动”。
相比现有多模态大模型(MLLM)和视觉-语言-动作(VLA)模型,VeBrain具备多项亮点:统一三类任务的语言建模范式,将机器人控制转化为常规2D空间文本任务;提出“机器人适配器”,包括关键点追踪、动作控制、技能执行及动态接管模块,实现精准映射;构建高质量多能力数据集VeBrain-600k,涵盖60万条指令数据,提升组合推理能力。
测试显示,VeBrain在视觉感知、空间推理和机器人控制能力上均达到最先进水平。其架构通过关键点检测与技能识别重构机器人控制任务,实现感知、推理、控制三大能力的统一建模路径。此外,机器人适配器模块确保MLLM与机器人间的闭环通信,增强动态环境下的稳定性和鲁棒性。
VeBrain-600k数据集包含20万条多模态理解数据、31.2万条空间推理数据及8.8万条机器人控制数据,通过链式思维标注大幅提升任务复杂度。实验表明,VeBrain在多模态理解、空间推理和机器人控制任务中实现了最佳权衡性能,平均提升31.5%,并在多个基准测试中超越当前最强开源模型。
原文链接
本文链接:https://kx.umi6.com/article/19780.html
转载请注明文章出处
相关推荐
换一换
世界模型来了因果技术标杆!具身大脑真要长脑子了
2026-07-02 13:00:03
具身智能“高考”难疯了!人类100分,最强模型12.8
2026-07-08 21:28:09
中科大 Labimus:机器人化学家要上岗,先得考过这场试
2026-07-15 15:01:07
冲刺全球首个100万小时具身数据!三家国产公司,联手了
2026-08-07 09:10:58
国家队+千亿产业+头部财投集体入局,智平方200亿估值筑就大湾区具身智能名片
2026-06-29 16:40:25
三连发!阿里发布首个具身大模型Qwen-Robot系列
2026-06-16 12:49:02
看了20万小时「人类干活实录」,机器人悟了
2026-07-19 17:24:02
人形之外,擎羽把“身体”变成具身智能的新变量
2026-08-12 13:22:30
支持17家机器人厂商20多种构型,蚂蚁灵波LingBot-VLA 2.0正式开源
2026-07-08 12:06:55
至简动力交付百台「开箱即用」机器人,加速具身量产节奏
2026-07-09 13:03:36
美国具身也没成熟!PI:中国公司何必总当“中国版XX”|RSS 2026
2026-07-25 20:43:20
独家专访李弘扬:成为 RSS 二十年唯一国人获奖者后,我要 all in 全身智能
2026-07-15 15:02:51
GAIR Paper 108 | CVPR 2026 冠军奖论文:4K 参数撬动 VLA 泛化,空间才是真正的瓶颈!
2026-07-17 14:37:05
743 文章
960422 浏览
24小时热文
更多
-
2026-08-14 00:44:54 -
2026-08-14 00:42:22 -
2026-08-13 21:37:36