GPT6-Astra搭的3D场景总和原图对不齐?Mira-Scene来解决!

2026.09.30 · 产品 · 论文 · 媒体报道

港大与VAST提出Mira-Scene,用像素对齐布局让单图重建的3D场景与原图严格一致。

香港大学与VAST提出生成式3D场景重建框架Mira-Scene,将场景布局转化为稠密、像素对齐的3D对应关系恢复问题,而非直接回归旋转、平移和尺度。仅用80k开源数据,其3D IoU精度比SAM3D提升39.8%,投影2D IoU提升16.5%。

  • 用CCM与PCM表示布局,形成稠密3D-3D对应关系
  • 通过RANSAC+Umeyama对齐求解物体变换
  • Geometry与Layout双专家联合生成,共享注意力交互
  • 两阶段训练:60K物体预训练+约20K场景微调
  • 相比SAM3D,3D IoU提升39.8%,2D IoU提升16.5%

为什么值得看

看清单图3D场景重建如何摆脱稀疏位姿回归的老路。

适合谁关注

3D生成、具身智能与图形学方向的研究者和开发者。

原始来源