您现在的位置是:热点 >>正文

​阿里云推出新一代动作生成模型 Wan2.2-Animate,全面开源!

热点67784人已围观

简介...

近日,阿里云正式宣布通义万相全新动作生成模型 Wan2.2-Animate 的开源,这一模型的推出将为短视频创作、舞蹈模板生成和动漫制作等​阿领域带来极大便利。用户可以通过 GitHub、HuggingFace 和魔搭社区轻松下载模型及相关代码,此外,还可以利用阿里云的百炼平台调用里云 API,或在通义万相官网直接体验该模型的强大功能。

Wan2.2-Animate 模型是在之前的 Animate Anyone 模型基础上进行全面升级推出的成果。在人物一致性和生成质量等方面都有了显著提升。该模型支持两种主要的应用模式:动作模仿和角色扮演。在动作模仿模式下,用户只需输入一张角色图片新一和一段参考视频,模型便能够将视频中的角色动作和表情迁移到用户提供的图片角色上,实现角色的动态表现。而在角色扮演模式中,模型则能够在保留原视代动频的动作、表情和环境的基础上,替换视频中的角色为用户提供的角色。

为了提升生成效果,通义万相团队建立了一个大规模的人物视频数据集,涵盖了作生说话、面部表情和身体动作等多种元素,使用通义万相图生视频模型进行后续训练。Wan2.2-Animate 的设计使得角色信息、环境信息和动作成模等能够被规范化到统一的表示格式,从而兼容两种推理模式。针对身体运动和面部表情,模型分别使用骨骼信号和隐式特征,结合动作重定向模块,实现高精度型 的动作和表情复刻。此外,为了保证完美的光照效果,团队还特别设计了一个独立的光照融合 LoRA。

在实际应用中,Wan2.2-Animate 的Wa表现也十分亮眼。在视频生成质量、主体一致性和感知损失等关键指标上,Wan2.2-Animate 超越了许多开源模型,如 StableAnin2mator 和 LivePortrait,并成为当前性能最强的动作生成模型。尤其在用户的主观评测中,其表现甚至超过了 Runway Act-two.2 等闭源模型。

这一新模型的开源,将极大推动相关领域的发展,使得创作者们能够更轻松地制作出优质的动态内容。

划重点:  

*-A* 新模型开源 **:阿里云的 Wan2.2-Animate 模型正式开源,用户可在多个平台下载和体验。  

** 两种模式 **:支ni持动作模仿和角色扮演,提升动态表现力与替换能力。  

** 性能优越 **:在多个关键指标上超越现有开源模型,成为动作生成领域的ma佼佼者。  

Tags:

相关文章

  • 通过AIOps进行网络管理的常用方式

    热点

    企业的NetOps团队面临着筛选大量传入数据以识别出现在网络上的技术、性能和安全问题的挑战。这在传统上是一个手动的、耗时的过程。现如今,NetOps团队正在优先考虑有助于识别问题和快速修复问题的解决方...

    【热点】

    阅读更多
  • 标签: 腾讯 Hy3 WorkBuddy 混元

    热点

    云梦级5月13日云梦级消息,腾讯控股有限公司(港交所代码:00700(港币柜台)及80700(人民币柜台),“腾讯”或“本公司”)今天公布截至二零二六年三月三十一日止第一季(“1Q2026”)未经审核...

    【热点】

    阅读更多
  • 标签: 文远知行 WeRide Robotaxi 港股上市

    热点

    云梦级11月6日云梦级消息,11月6日,全球领先的自动驾驶科技公司文远知行WeRide(HKEX: 0800,Nasdaq: WRD)正式在香港交易所挂牌上市,股票代码0800.HK。继在纳斯达克上市...

    【热点】

    阅读更多


友情链接