JoyVASA是京东健康国际公司开源的音频驱动的数字人头项目,基于扩散模型技术,根据音频信号生成与音频同步的面部动态和头部运动。JoyVASA能实现人物的唇形同步和表情控制,还扩展到动物头像的动画生成,在多语种支持和跨物种动画化方面具有广泛的应用潜力。

JoyVASA – 京东健康开源的音频驱动的数字人头项目  第1张
(图片来源网络,侵删)
JoyVASA – 京东健康开源的音频驱动的数字人头项目  第2张
(图片来源网络,侵删)