Scene

general · 首次出现 2026-05-22 · 最近出现 2026-10-28 · 累计提及 95

综述

Scene(场景)在 AI 语境下主要指两件事:一是让模型理解、重建三维场景的几何表征研究,二是图像与视频生成中围绕场景一致性的能力。它处于计算机视觉与生成式 AI 的交汇点:从新视角合成、3D 世界建模,到视频生成中保持场景不'穿帮',都是这一方向的核心问题。近期的动态显示,场景表征研究和场景一致性工具几乎同步推进。

Scene 相关近期进展

  • GeoState:视图解耦几何表征用于 3D 世界建模:arXiv 上的这项工作提出视图解耦的几何表征,用于 3D 世界建模,目标是让模型更好地刻画场景在不同视角下的结构。
  • SNAP:从新视角合成学习几何表征的自监督 Transformer:自监督 Transformer 借助新视角合成任务学习几何表征,不依赖标注数据即可理解三维场景,是场景表征学习路线的代表。
  • Runway 发布 Scene Fixer,用视觉 AI 精准修复 AI 片段不一致:Runway 推出 Scene Fixer,用于修复生成视频片段之间的场景不一致问题,说明场景一致性已成为视频生成产品的痛点与卖点。
  • Microsoft 发布 MAI-Image-2.7-Preview,登顶 AA-Image-Editing v2.1 第二名:微软的图像编辑模型在 Artificial Analysis 的榜单上获得第二名,图像编辑能力与场景级理解直接相关。
  • 用一句提示词把名画变成真实照片:Ideogram 4.5 实操演示:Ideogram 4.5 演示了单句提示词将名画转为真实照片的效果,考验模型对画面场景风格与物理细节的转换能力。
  • 当前焦点与观察点

    目前围绕 Scene 的讨论集中在两条线:一条是学术上的场景理解,包括 RGB-only 主动式 3D 场景图生成(服务室内移动机器人)等面向具身智能的探索;另一条是生成侧的场景一致性,例如 Genie 4 演示了以"Scene: …"结构化提示词生成内容的方式,Agentic Self-Improvement 框架则尝试提升图生视频的语义一致性。

    值得关注的问题是:几何表征研究能否与生成模型有效结合,让视频生成的场景长期稳定;以及 Scene Fixer 这类后处理工具是否会成为视频工作流的标准环节。此外,结构化提示词(把 Scene、Character 分开描述)正在成为控制生成内容的新交互范式,其效果边界仍有待更多实测验证。

    相关报道

    10 条在档