Wan2.2 Animate FP8/16 and Quants

wan 2.2 动画!

Wan-Animate 可以根据表演者的视频为任何角色制作动画,精确复制表演者的面部表情和动作,生成高度逼真的角色视频。

Wan-Animate 可以用动画角色替换视频中的角色,保留其表达和动作,同时复制原始灯光和色彩色调,实现无缝环境融合。

推荐工作流
https://humanaigc.github.io/wan-animate/

来自万安妮玛特网站:

我们推出了Wan-Animate,这是一个用于角色动画和替换的统一框架。给定一个角色图像和一个参考视频,Wan-Animate 可以通过精确复制视频中角色的表情和动作来生成高保真角色视频,从而为角色带来动画效果。或者,可以将动画角色融入参考视频中,以取代原作,复制场景的灯光和色彩色调,实现无缝的环境融合。万-阿尼马特建立在万氏模型之上。为了将其应用于角色动画任务,我们采用了改进的输入范式,以区分代用的参考条件和区域。此设计将多个任务统一为共同的符号表示。我们利用与空间相对的骨骼信号,复制从源图像中提取的身体运动和隐性面部特征,以重现表情,从而生成具有高可控性和表现力的人物视频。此外,为了在特性替换过程中增强环境集成性,我们开发了辅助的Relighting LoRA。本模块在运用合适的环境照明和色彩色调的同时,保持了角色的外观一致性。实验结果表明,万-阿尼马特达到了最先进的性能。我们致力于开源模型权重及其源代码