Wan2.2-Animate - 阿里通义开源的动作生成模型

发布于 2025-09-19 · Wan2.2-Animate是阿里通义团队推出的动作生成模型,模型同时支持动作模仿和角色扮演两种模式,能基于表演者的视频,精确复制面部表情和动作,生成高度逼真的角色动画视频。

Wan2.2-Animate是什么

Wan2.2-Animate是阿里通义团队推出的动作生成模型,动作模仿和角色扮演两种模式同时支持。给一段表演者的视频,面部表情和动作能被精确复制下来,出来的角色动画视频很逼真。动画角色可以替换进原视频,场景的光照和色调也对得上。模型基于Wan模型构建:肢体动作由空间对齐的骨骼信号控制,表情靠从源图像提取的隐式面部特征重现,角色视频的生成既可控又有表现力。现在可以通义万相官网,在线直接体验Wan2.2-Animate模型。

Wan-Animate

Wan2.2-Animate的主要功能

  • 动作模仿 :输入一张角色图片和一段参考视频,参考视频里角色的动作和表情会被搬到图片角色身上,静态的图也能动起来。
  • 角色替换 :原始视频的动作、表情和环境都保留,只把片中的角色换成传入图片里的角色,合成后看不出接缝。

Wan2.2-Animate的技术原理

  • 输入范式:改动Wan模型的输入范式,把参考图像输入、时间帧引导和环境信息收进同一个符号表示,角色动画任务需要什么就供什么。
  • 肢体动作控制:身体动作用空间对齐的骨骼信号来复制,角色的肢体运动描述得很精确;信号和角色图像结合,动作就能控到点上。
  • 面部表情控制:表情由源图像提取的隐式面部特征驱动,细微的变化也捕捉得到,重现出来的表情很真。
  • 环境融合:为了让替换后的角色跟新环境贴得更紧,团队做了一个辅助的Relighting LoRA模块。角色外观保持一致,光照和色调跟着新环境走,融合得很自然。

如何使用Wan2.2-Animate

  • 访问通义万相官网:访问通义万相官网,登录平台。
  • 上传图片和视频:传一张角色图片,再配一段参考视频。
  • 选择模式:动作模仿或角色替换,挑一个模式。
  • 生成动画:点生成按钮,模型自动处理并输出结果。

Wan2.2-Animate的项目地址

  • 项目官网:https://humanaigc.github.io/wan-animate/
  • HuggingFace模型库:https://huggingface.co/Wan-AI/Wan2.2-Animate-14B
  • arXiv技术论文:https://arxiv.org/pdf/2509.14055

Wan2.2-Animate的应用场景

  • 视频编辑:视频里的人物可以换成动画角色,换完还能融进原来的环境,画面上接得住。
  • 游戏开发:玩家的动作捕捉数据能实时转成角色动画,游戏角色的动作更自然,交互性和沉浸感都强一些。
  • 虚拟现实与增强现实:虚拟现实(VR)和增强现实(AR)里可以造逼真的虚拟角色,跟人的交互更自然,体验也更沉浸。
  • 教育与培训:教学场景里做动画角色当助手,靠表情和动作把学生注意力拉过来,课讲得更有趣也更好互动。
0

相关文章

0 条评论

后参与评论

暂无评论,来抢沙发。