AI 日报hiw3c.com

ECCV 2026 专访:让大模型「忘掉XYZ」,RoboTracer 用 3D 空间感知与度量推理重塑机器人轨迹追踪

雷峰网·AI 科技评论 www.leiphone.com 网页快照

ECCV 2026 专访:让大模型「忘掉XYZ」,RoboTracer 用 3D 空间感知与度量推理重塑机器人轨迹追踪

拿水壶从左到右依次给花浇水,喷头需悬停在每朵花上方 1 到 5 厘米处。

大模型为什么

总在3D空间里“犯路痴”?

一个好的表达方式确实能让通用 VLM 学 3D 事半功倍。
大语言模型在预训练阶段已隐式记忆了物体的物理先验(手机是厘米级、桌子是米级),强行统一单位反而会与内在知识打架;放手让模型根据上下文自由选择最匹配的物理单位(米、厘米、英寸等),尺度的估计精度反而显著提升。

结构化格式校验(R_PF) :约束模型按 [感知类型] [目标物体]: [数值] 严格输出,例如 [Measuring] [第一朵花高度]: 0.35m、[Referring] [水壶位置]: (454, 723, 0.963)。

分属性度量精度奖励(R_Acc) :针对不同类型的感知步骤设定专属的物理误差容忍阈值(如像素误差在 10% 以内、深度和尺寸估算在 ±30% 以内)。只要推导出的关键感知证据符合真实物理约束,模型就会获得正向激励。

450万条轨迹从哪来?

揭秘“数据飞轮”的三条流水线

实测碾压!同一张“3D路书”竟能

同时指挥机械臂和人形机器人

结语:

具身智能不需要“万能黑盒”

▎ AI科技评论:用纯文本监督的方式训练 VLM 做 3D 任务,一开始担心过吗?有没有什么意外的发现?

▎ AI科技评论:从 3D 视觉轨迹到真实的物理交互,当前最大的“物理断层”在哪里?

▎ AI科技评论:完成从 RoboBrain 到 RoboTracer 的演进后,您认为具身智能在空间理解上的下一个爆发点是什么?

为了方便大家抱团交流、互通会议消息,我们专门建了 ECCV 2026 参会交流群 !进群你会解锁这些「福利」 ?

会议情报站 : 投稿 DDL、格式规范、评审进度……关键节点第一时间送达,再也不怕错过 deadline,投稿准备稳稳的。

同行茶话会 : 天南海北的同行都在群里,聊心得、碰思路、攒人脉,科研路上我们同行。

前沿补给站 : 最新研究成果、热点方向实时同步,结合会议主题帮你捋清投稿脉络,给论文灵感加满油。

现场后援团: (会议期间专属开启): 到了会场也不用慌—— 路线导航 : 场馆分布、报告厅怎么走,群里随时问; 议题共读 : 热门 session、Keynote 现场探讨,错过也能追; Poster 汇编 : 现场海报精华整理,一键收藏不遗漏; 约局广场 : 约饭局、采访局、交流局……想唠嗑、想合作、想面基,群里发起就成。

? 进群传送门: 扫码进群或添加微信 Qvv0909777 ,备注:ECCV + 单位/学校+姓名+方向 。

CVPR 2026 | VesMamba:3D肺部血管精确分割法

ECCV 2022 | 创新奇智提出通过单品示例进行基于原型 ...

ACL 2022奖项公布!达摩院、华为等机构获奖,陈丹琦 ...

创新奇智2021年营收8.6亿,研发开支增8成加强技术实 ...

别再乱调图像塔了!浙大 IJCAI 论文揭露 VLM 非对称性真相,给 CLIP 微调「踩刹车」

从「3D相册」到「物理底座」:CVPR 2026 开启 3DGS 的具身智能时代

BIMSA 王雅晴:Scaling Law 触及天花板,「数据高效学习」指向 AI 的下一站|IJCAI 2026

机械臂做到第10步就容易出错?一个 2B 模型靠动态调整注意力解决了 | IJCAI 2026

把 Gemini 和 GPT 放到《我的世界》当教练,谁能看懂机器人的微操?

7 篇 ECCV 论文!极佳视界联合顶尖高校,打通空间智能从「看得稳」到「摸得准」再到「决策灵」的落地瓶颈

群核科技联手英伟达、英特尔、浙大,三篇 ECCV 论文给物理 AI 造基础设施

腾讯混元、清华、南洋理工联手,「以小博大」破解空间智能算力与记忆断裂难题 | ECCV 2026

机械臂做到第10步就容易出错?一个 2B 模型靠动态调整注意力解决了 | IJCAI 2026

把 Gemini 和 GPT 放到《我的世界》当教练,谁能看懂机器人的微操?