Wan2.2-Animate V2版 - 一键替换视频角色,实现角色动作及表情同步迁移替换 支持50系显卡 ComfyUI工作流 一键整合包下载
Wan2.2-Animate 是一个由阿里巴巴通义实验室开发的AI动画生成工具,它能通过一段真人表演视频,让任何静态角色“活”起来,精准复现表演者的表情和动作,生成逼真的动画视频。
Wan2.2-Animate 支持驱动人物、动漫形象和动物照片,可应用于短视频创作、舞蹈模板生成、动漫制作等领域。只需要上传一张静态人物照片,加一段参考视频,即可实现静态图像无缝替换视频中的人物,并实现视频统一的动作和表情同步迁移。
今天分享的 Wan2.2-Animate V2版,基于KJ版最新版工作流搭建,相对于前一个版本,主要有以下改进和提升:动作复制更加完美协调;采样速度更快以及有效的减少了伪影。新版还支持识别分割主体和背景,无需手动添加分割点。
下载地址:点此下载
核心特点
高度真实的角色动画:Wan-Animate可以根据一段真实人物的表演视频,精确复制这个人的面部表情和动作,然后将其应用到任何角色图像上,生成非常逼真、富有表现力的角色视频。
角色替换与无缝环境融合:这项技术不仅能动画化角色,还能将动画后的角色无缝集成到参考视频中,替换掉原来的角色。它会复制场景的光照和色调,让新角色看起来就像是原本就在那个环境里一样。
灵活的控制与表达:通过使用空间对齐的骨架信号来复制身体动作,以及从源图像中提取的隐含面部特征来重现表情,Wan-Animate让生成的角色视频具有高度的可控性和表现力。
先进的辅助光照模块:为了增强角色替换时的环境融合度,Wan-Animate还开发了一个辅助光照LoRA模块。这个模块能在保持角色外观一致性的同时,应用适当的环境光照和色调。
应用领域
影视制作:在电影、电视剧或动画制作中,Wan-Animate可以快速生成或修改角色动画,降低制作成本和时间。
游戏开发:游戏开发者可以利用这项技术来创建更真实、更生动的角色动画,提升玩家的游戏体验。
虚拟偶像与直播:在虚拟偶像表演或在线直播中,Wan-Animate可以实时驱动虚拟角色的动作和表情,增加互动性和趣味性。
广告与营销:广告商可以利用这项技术来创建吸引人的角色动画,用于产品推广或品牌宣传。
使用教程:(建议N卡,显存12G起,支持50系显卡,本地需CUDA≥12.5)
整合包包含所需所有节点,下载主程序和模型(ComfyUI文件夹即为模型),解压主程序一键包,将ComfyUI文件夹移动到主程序目录下即可。
双击启动,进入WebUI后,点击左侧的 工作流程,选择对应的工作流
上传一张需要替换的照片(支持人物、动漫和动物)及一个参考视频,手动设置生成视频的宽度和高度(建议图片和参考视频使用相同的比例),运行即可。
这个版本我放了两个模型,一个KJ版的fp8,一个gguf。第一个效果更好,需要16G显存起,第二个gguf效果略差,需要12G显存起。只需要在“模型加载”模块,WanVideo Model Loader节点切换即可。
还有精度更低的8G显存可用的gguf量化版,因为效果太差,这里就不提供了,感觉生成出来也没太大意义。类似视频生成应用,测试下来,8G出来的效果质量都很差,所以8G显存只能体验下,真正用于生产,还是是远远不够的。