Generative Omnimatte 是 Google DeepMind 等机构推出的视频编辑技术,能将视频智能分解为多个透明背景的RGBA图层,每个图层对应一个物体及其相关效果(如阴影、反射等)。无需绿幕或深度信息,能实现物体与背景的精确分离,处理被遮挡的部分。Generative Omnimatte的核心是一个名为“Casper”的视频扩散模型,能精准擦除视频中的物体及其阴影,同时保持背景完好无损。用户能轻松实现各种创意效果,如瞬移、改变运动速度,甚至让时间倒流。

Generative Omnimatte – 谷歌联合马里兰大学等机构推出的视频分解技术  第1张
(图片来源网络,侵删)
Generative Omnimatte – 谷歌联合马里兰大学等机构推出的视频分解技术  第2张
(图片来源网络,侵删)