自回归扩散相关 AI 资讯 · AITOP · AI热报

9月2日

10:43

10:43

AI Will@FinanceYF5

精选73°

研究人员发布了一种从零开始预训练的多模态自回归扩散Transformer架构。该架构融合了现代大语言模型和视频模型的优势。它受益于两个领域在架构、算法和系统上的最新进展。这一统一架构能够处理多种模态的数据。

AI模型多模态 Transformer 自回归扩散

推荐理由：新发布的架构融合了语言和视频模型优势，从零开始预训练，多模态处理能力强。

7月10日

11:45

11:45

官方账号arXiv cs.LG@Kaifeng Zhao, Mathis Petrovich, Haotian Zhang, Tingwu Wang, Siyu Tang, Davis Rempe

73°

ARDY 是一个流式生成框架，采用混合表示（显式根特征与潜在身体嵌入）和两阶段自回归变压器去噪器，支持在线文本提示和灵活的运动学约束。在 HumanML3D 基准和 Bones Rigplay 数据集上的评估显示，其运动质量和约束遵循度高。通过交互式演示展示动态文本控制、关键帧姿势约束、路径跟随和鼠标键盘运动控制。代码和模型已发布。

AI模型 ARDY NVIDIA 人体运动生成

推荐理由：NVIDIA 实验室提出 ARDY，能实时生成高质量人体运动，支持文本+约束控制，比传统方法更可控、更快速。