FaceShot是同济大学、上海 AI Lab和南京理工大学推出的新型无需训练的肖像动画生成框架。用外观引导的地标匹配模块和基于坐标的地标重定位模块,为各种角色生成精确且鲁棒的地标序列,基于潜在扩散模型的语义对应关系,跨越广泛的角色类型生成面部动作序列。将地标序列输入预训练的地标驱动动画模型生成动画视频。FaceShot突破对现实肖像地标的限制,适用于任何风格化的角色和驱动视频,或作为插件与任何地标驱动的动画模型兼容,显著提升整体性能。

FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架  第1张
(图片来源网络,侵删)
FaceShot – 同济大学联合上海 AI Lab等推出的肖像动画生成框架  第2张
(图片来源网络,侵删)