阿里云推出新一代动作生成模型 Wan2.2-Animate,全面开源!
近日,阿里云正式宣布通义万相全新动作生成模型 Wan2.2-Animate 的开源,这一模型的推出将为短视频创作、舞蹈模板生成和动漫制作等阿领域带来极大便利。用户可以通过 GitHub、HuggingFace 和魔搭社区轻松下载模型及相关代码,此外,还可以利用阿里云的百炼平台调用 API,里云或在通义万相官网直接体验该模型的强大功能。
Wan2.2-Animate 模型是在之前的 Animate Anyone 模型基础上进行全面升级的成果。推出在人物一致性和生成质量等方面都有了显著提升。该模型支持两种主要的应用模式:动作模仿和角色扮演。在动作模仿模式下,用户只需输入一张角色图片和新一一段参考视频,模型便能够将视频中的角色动作和表情迁移到用户提供的图片角色上,实现角色的动态表现。而在角色扮演模式中,模型则能够在保留原视频的动作代动、表情和环境的基础上,替换视频中的角色为用户提供的角色。
为了提升生成效果,通义万相团队建立了一个大规模的人物视频数据集,涵盖了说话、面部表情作生和身体动作等多种元素,使用通义万相图生视频模型进行后续训练。Wan2.2-Animate 的设计使得角色信息、环境信息和动作等能够被规范化到统一的成模表示格式,从而兼容两种推理模式。针对身体运动和面部表情,模型分别使用骨骼信号和隐式特征,结合动作重定向模块,实现高精度的动作和表情复刻。此外型 ,为了保证完美的光照效果,团队还特别设计了一个独立的光照融合 LoRA。
在实际应用中,Wan2.2-Animate 的表现也十分亮眼。在视频生成Wa质量、主体一致性和感知损失等关键指标上,Wan2.2-Animate 超越了许多开源模型,如 StableAnimator 和 LivePortrn2ait,并成为当前性能最强的动作生成模型。尤其在用户的主观评测中,其表现甚至超过了 Runway Act-two 等闭源模型。
这一新模型的开源.2,将极大推动相关领域的发展,使得创作者们能够更轻松地制作出优质的动态内容。
划重点:
** 新模型开源 **:阿里云的 Wan-A2.2-Animate 模型正式开源,用户可在多个平台下载和体验。
** 两种模式 **:支持动作模仿和角色扮演,提升动态表现ni力与替换能力。
** 性能优越 **:在多个关键指标上超越现有开源模型,成为动作生成领域的佼佼者。 &nbmasp;
(责任编辑:项目案例)
- 阿里MuleRun陈宇森:AI Native团队效率是Copilot团队10倍,企业转型窗口期仅18个月
- 云计算巨头掀起法律战:亚马逊状告诺基亚专利侵权
- 阿里云宣布携手英伟达,布局具身智能与Physical AI
- 华为全新 XMAGE 智拍功能震撼发布,支持 AI 姿势推荐
- 亚马逊29日发布一季度财报 云计算营收有望超过130亿美元
- 90后华裔教授一年连发三篇Nature子刊!首个量子神经网络QuantumFlow开源
- 科普一下机器学习热门概念
- Twitter绗�簩瀛e害钀ユ敹11.9浜跨編鍏� 鍚屾瘮鎵�簭涓虹泩
- 标签: 迦智科技 机器人解决方案 具身智能底盘 港股IPO
- 专利申请显示苹果研究如何将显示屏集成到智能扬声器的织物中
- 标签: 曦华科技 AI芯片 港交所上市 招股书
- 标签: 同程旅行 元宝 AI春晚总动员 春节旅游
- 标签: 京东外卖 七鲜小厨 外卖市场份额 餐饮生态
- 2021吉利
- 云计算开发:Python练习实例-时间函数举例
- 标签: 索尼 TCL BRAVIA 合资公司
- Kubernetes为科技行业创造公平竞争环境
- 标签: 金山办公 WPS 超级会员 大会员
- 腾讯云 TokenHub 发布 DeepSeek-V4 预览版,百万上下文支持全面上线
- 爱奇艺 CEO 龚宇: AI 技术将颠覆长短视频行业
- https://www.seagrant.wisc.edu/?page=63&s=谷歌快排操作流程【tg:seogoogle987】,HMA views+
- https://www.temu.com/search_result.html?search_key=谷歌快排操作流程【tg:seogoogle987】cqL views+
- https://www.lee.com/search?q=谷歌快排操作流程【tg:seogoogle987】,Id7 views+
- https://www.selfsufficientish.com/main/?s=谷歌快排操作流程【tg:seogoogle987】,ShU views+
- https://www.partilerdunyasi.com/index.php?route=product/search&tag=谷歌快排操作流程【tg:seogoogle987】,pKf views+
- https://www.goodreads.com/quotes/tag/谷歌快排操作流程【tg:seogoogle987】wmH views+
- https://www.kaliastyle.com/catalogsearch/result/?q=GOOGLE谷歌快排操作流程【tg:seogoogle987】,OO5 views+
- https://www.so.com/s?ie=utf-8&src=360sou_home&_re=0&q=谷歌快排操作流程【tg:seogoogle987】,v60 views+
- https://www.sic-info.org/vi/?s=谷歌快排操作流程【tg:seogoogle987】,iA3 views+
- https://www.tailoy.com.pe/catalogsearch/result/?q=谷歌快排操作流程【tg:seogoogle987】,0Oc views+
