ScribbleDiff是一种先进的文本到图像生成技术，基于用户简单涂鸦的视觉提示指导图像的生成过程。通过分析涂鸦确保生成的图像中的对象方向与用户涂鸦的方向一致，并将涂鸦扩展生成更完整和细致的图像。ScribbleDiff的核心在于两个关键组件：矩对齐和涂鸦传播。矩对齐来改善物体方向与涂鸦方向之间的对齐，涂鸦传播则通过稳定扩散过程中的传播，使涂鸦随时间显著扩大，改善物体形状并增强视觉连贯性。ScribbleDif克服传统边界框和区域蒙版的局限性，生成的图像更准确地反映用户的意图，提供一种直观且有效的与计算机交互的方式。

ScribbleDiff – 开源的涂鸦内容转换成图像的生成技术 第1张
（图片来源网络，侵删）
ScribbleDiff – 开源的涂鸦内容转换成图像的生成技术 第2张
（图片来源网络，侵删）