AnimateDiff是由上海人工智能实验室、香港中文大学和斯坦福大学的研究人员推出的一款将个性化的文本到图像模型扩展为动画生成器的框架，其核心在于它能够利用从大规模视频数据集中学习到的运动先验知识，可以作为 Stable Diffusion 文生图模型的插件，允许用户将静态图像转换为动态动画。该框架的目的是简化动画生成的过程，使得用户能够通过文本描述来控制动画的内容和风格，而无需进行特定的模型调优。

AnimateDiff – 扩展文生图模型生成动画的框架 第1张
（图片来源网络，侵删）
AnimateDiff – 扩展文生图模型生成动画的框架 第2张
（图片来源网络，侵删）