ECCV 2026|不靠「上帝视角」,也不等「完美指令」:REAL 让具身智能体走向开放世界

2026.09.15 · 产品 · 论文 · 论文预印本

上海交大等机构提出REAL框架,让机器人主动探索、询问用户,完成模糊指令任务。

上海交通大学、上海人工智能实验室等机构提出REAL,一个面向开放世界移动操作的视觉具身智能体框架,解决环境未知和意图模糊两大问题。REAL在仿真中去除特权感知,引入模拟用户,通过主动探索、视觉定位、意图消歧和物理操作的统一闭环,并在REAL-Bench(241个任务)上验证,真机部署60个episode取得78.3%端到端成功率。

  • 去除特权感知,主动探索环境
  • 引入模拟用户,支持意图消歧
  • 双阶段训练:SFT+在线RL
  • REAL-Bench含241个任务实例
  • 真机60个episode成功率78.3%

为什么值得看

突破仿真理想化假设,推动具身智能体走向真实开放世界。

适合谁关注

具身智能、机器人学习、VLA领域的研究者和工程师。

原始来源