Feb, 2024

通过视频物体分割和跟踪的蒙版动画

TL;DR介绍了一种名为 Lester 的新方法,可以从视频中自动合成复古风格的 2D 动画,主要将这个挑战视为对象分割和跟踪问题,并通过使用 Segment Anything Model (SAM) 对视频帧进行处理,并使用 DeAOT 对生成的掩码进行后续帧的跟踪,最后使用 Douglas-Peucker 算法简化掩码的轮廓,该方法在时间上表现得很一致,并能正确处理不同姿势、外观、动态镜头、部分镜头和多样背景的视频。