BriefGPT.xyz
Jul, 2023
VideoControlNet:一个使用控制网络的扩散模型的运动引导视频到视频翻译框架
VideoControlNet: A Motion-Guided Video-to-Video Translation Framework by Using Diffusion Model with ControlNet
HTML
PDF
Zhihao Hu, Dong Xu
TL;DR
通过使用具有控制网络的扩散模型,在给定提示和输入视频的条件下,我们提出了一种新的运动引导视频到视频转换框架VideoControlNet,以生成各种视频。通过使用运动信息来防止冗余区域的再生成以保持内容一致性。
Abstract
Recently,
diffusion models
like StableDiffusion have achieved impressive
image generation
results. However, the generation process of such
diffus
→