事件专题 ·多源确认

单张参考图即可定制人物视频生成:测试时自监督个性化方法

该方法针对姿态驱动的人物视频扩散模型在姿态偏离参考图时身份丢失的问题,用一张参考图完成个性化。流程分三步:域调优的姿态条件生成器在关键姿态合成伪真值帧,推理时的 reference-only 采样器筛选身份最一致的候选帧,再为每个对象训练低秩适配器(LoRA)。全程不需要对象的多姿态视频、真值或标注。在 TikTok 和 UBC Fashion 基准上,适配后模型在所有指标上超过基线,仅用 0 张真实视频帧即可媲美或超过用 5 帧真实数据做适配的效果。代码与权重已在 GitHub 开源。

当前结论

一张照片就能让人物视频模型保住脸和衣服,不用录视频做微调,代码和权重都开源了,做视频生成的可以试试。

3 个信源41° AI 热度最后更新 2026/11/2 11:34:22

证据链

3 个信源

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。

单张参考图即可定制人物视频生成:测试时自监督个性化方法 · 事件专题|AI热报