视频编辑最新SOTA!港中文&Adobe等发布统一视频生成传播框架——GenProp
文章链接:https:arxiv.orgpdf2412.19761项目链接:https:genprop.github.io亮点直击定义了一个新的生成视频传播问题,目标是利用I2V模型的生成能力,将视频第一帧的各种变化传播到整个视频中。精心设计了模型GenProp,包含选择性内容编码器(SelectiveContentEncoder,SCE)、专用损失函数以及mask预测头,并提出了一个用于训练模型的合成数据生成pipeline。本文的模型支持多种下游应用,如移除、插入、替换、编辑和跟踪。实验...