SynCamMaster是浙江大学、快手科技、清华大学和香港中文大学的研究人员共同合作推出的全球首个多视角视频生成模型,能结合6自由度相机姿势,从任意视点生成开放世界视频。SynCamMaster增强了预训练的文本到视频模型,确保不同视点的内容一致性,支持多摄像机视频生成。基于插件式模块和多视图同步模块,实现视点间的动态同步,保持4D一致性。SynCamMaster能扩展到新视角视频合成,重新渲染输入视频从新视角观看。

SynCamMaster – 快手联合浙大、清华等机构推出的多视角视频生成模型  第1张
(图片来源网络,侵删)
SynCamMaster – 快手联合浙大、清华等机构推出的多视角视频生成模型  第2张
(图片来源网络,侵删)