11:57官方账号arXiv cs.LG@Baback Elmieh, Lynn Tsai, Zeman Li, Srinivas Kaza, Tiancheng Sun, Gabor Csapo, Ali Behrouz, Yuan Deng, Stephen Lombardi, Steven M. Seitz, Xuan Luo该方法将记忆更新与记忆应用解耦,记忆更新周期进行、记忆应用逐帧完成,并采用跨视角注意力处理记忆状态与当前帧之间的形变。引入辅助Memory Loss强制模型内化场景历史,Memory Caching策略防止主动权重灾难性漂移。在动态人体运动场景上实现实时处理,SOTA性能,支持分钟级在线记忆。论文新视角合成动态场景记忆机制推荐理由:这篇论文提出一种新的动态视角合成方法,通过分开记忆更新和应用的频率,实现了实时处理,而且能记住长视频里的短暂遮挡区域。原文稍后读已读值得跟进有用关注 新视角合成
10:27官方账号arXiv cs.AI@Liyuan Zhu, Shengyu Huang, Amrita Mazumdar, Tianye Li, Zan Gojcic, Gordon Wetzstein, Iro Armeni, Shalini De Mello, Alex Trevithick该方法提出从单目视频生成可自由渲染的动态3D高斯表示。通过视频模型条件化密集像素对齐渲染,编码外观、几何和3D场景运动,以纠正初始重建的伪影并填补缺失区域。训练时构建了多视角视频对和动态3DGS数据集,模拟单目重建的典型伪影。测试时将模型生成的新区域和运动蒸馏回单一一致的高质量动态3DGS,在4D重建上达到新SOTA,并泛化到视角变化大的野外视频。论文3D高斯重建动态场景单目视频推荐理由:想从普通视频生成能自由旋转看的3D场景?这个新方法用高斯点云重建动态效果,超越现有4D重建技术。原文稍后读已读值得跟进有用关注 3D高斯重建