字数 1650,阅读大约需 9 分钟

阿里发布Animate Anyone 2:视频人物替换与动作表情迁移的革新
近日,阿里巴巴在人工智能领域推出最新技术成果Animate Anyone 2[1],为视频人物替换及动作表情无缝迁移带来全新解决方案,在行业内引发广泛关注。
精准的视频人物替换功能
从项目官网丰富案例可见,Animate Anyone 2操作便捷。用户提供原始视频与目标角色图像,系统就能在保留原视频动作轨迹前提下,快速精准完成人物形象实时替换。官网实验数据显示,系统实际应用表现卓越。比如,能将足球运动员射门动作完整逼真迁移至动画角色,且完美保留球体运动轨迹的真实物理特性。这表明,无论复杂体育赛事动作还是其他动态场景,Animate Anyone 2都能实现高质量人物替换与动作迁移。
不仅如此,在对细节和场景要求极高的影视制作领域,Animate Anyone 2适应性强大。它支持自定义光照调节与背景环境适配,通过精细调整光照和背景,实现人物与场景深度融合,让替换后的视频画面更自然真实。在影视制作中,场景与人物融合效果直接影响作品质量和观众观看体验,Animate Anyone 2此功能可显著提升影视制作效率和质量。
动态骨骼绑定技术的卓越表现
Animate Anyone 2搭载的动态骨骼绑定技术是一大亮点。该技术通过精确追踪人体28个关键骨骼点,能极其准确地捕捉肢体运动轨迹与面部微表情。公开测试视频中,舞蹈演员连续优美的旋转动作、武术动作中快速多变的腾挪,替换后的角色都能完美保持动作连贯性,面部微表情也与原始动作配合默契。
从技术原理看,这种动态骨骼绑定技术核心在于对人体骨骼结构和运动规律的深入理解与精准模拟。通过实时追踪28个关键骨骼点,系统实时获取人体运动信息,并准确应用到目标角色。人体关键骨骼点对准确描述肢体运动和表情变化至关重要,Animate Anyone 2对这些关键骨骼点的精确捕捉,使其在动作表情迁移方面准确性和稳定性极高。
创新性的技术策略
在技术层面,Animate Anyone 2采用形状无关的掩模策略。此策略能更有效描述角色与环境关系,打破传统技术对角色形状的依赖,提高系统在不同场景的适应性。同时,为增强角色与周围物体互动效果,Animate Anyone 2引入轻量级的物体引导器。
该物体引导器负责提取与角色互动的物体特征,并通过空间融合技术将这些特征注入去噪过程。如此设计,让角色运动时与环境及物体互动更流畅真实。例如在角色与桌子互动场景中,物体引导器能准确识别桌子位置、形状等特征,并通过空间融合技术,使角色动作与桌子互动更自然。
与同类产品的对比优势
与市场同类产品Viggle和MIMO相比,Animate Anyone 2在多个关键指标上更胜一筹。在角色一致性方面,Animate Anyone 2能确保替换后的角色在整个视频中保持形象和动作高度一致,不会出现角色变形或动作脱节。而测试数据显示,Viggle和MIMO在复杂动作场景下,角色一致性出现偏差概率分别为15%和12%。
在细节保留方面,Animate Anyone 2凭借精确骨骼绑定技术和先进算法,最大程度保留原始视频细节信息,如角色服饰纹理、面部细微表情等。相比之下,Viggle和MIMO细节还原度稍逊,平均细节保留率比Animate Anyone 2低10% – 15%。
在互动真实性方面,Animate Anyone 2通过引入物体引导器和空间融合技术,使角色与环境及物体互动更逼真。同类产品在这方面表现较弱,互动效果生硬、不自然。这些数据表明,Animate Anyone 2在角色动画技术领域已达领先水平。
广阔的应用前景
Animate Anyone 2推出后,在多个领域应用潜力扩大。在游戏领域,能为游戏开发者提供强大的角色动画制作工具,使游戏角色动作更丰富、表情更生动,提升游戏沉浸感和趣味性。市场调研机构数据显示,未来几年游戏行业对高质量角色动画技术需求将以每年20%速度增长,Animate Anyone 2有望满足这一市场需求。
在影视制作领域,它能大幅提高影视制作效率和质量,为导演和制片人提供更多创意空间。行业报告表明,影视制作行业对新技术接纳速度加快,预计未来3 – 5年内,超60%影视制作公司将采用类似Animate Anyone 2的先进技术。
在虚拟现实(VR)和增强现实(AR)领域,Animate Anyone 2应用可让虚拟场景中角色与用户实现更自然、流畅互动,提升用户体验。随着VR和AR技术普及,市场对高质量角色动画需求增加,Animate Anyone 2有望在此领域发挥重要作用。
项目地址:https://humanaigc.github.io/animate-anyone-2/,感兴趣的开发者和研究人员可进一步了解探索。
引用链接
[1]
Animate Anyone 2: https://humanaigc.github.io/animate-anyone-2/