跳到正文
arXiv · AI· Ziyun Zeng, Yiqi Lin, Guoqiang Liang, Mike Zheng Shou·· 1 天前AI 评分27

Sparkle 提出解耦引导实现指令驱动视频背景替换

Sparkle: Realizing Lively Instruction-Guided Video Background Replacement via Decoupled Guidance

AI 导读

针对视频背景替换任务因缺乏高质量训练数据而发展受限的问题,Sparkle 设计了一种解耦引导的数据生成流水线。 该流水线通过严格质量过滤生成前景和背景引导,构建了包含约 140K 视频对的 Sparkle 数据集及最大规模评测基准 Sparkle-Bench。 基于该数据集训练的模型在 OpenVE-Bench 和 Sparkle-Bench 上表现优于现有基线,且代码与数据已全部开源。

来源:arXiv · AI · arxiv.org