开发者社区 问答 正文

Stable Diffusion是如何工作的?

Stable Diffusion是如何工作的?

展开
收起
夹心789 2024-05-30 13:53:01 71 分享 版权
1 条回答
写回答
取消 提交回答
  • 1、图像编码器将图像从像素空间(Pixel Space)压缩到更小维度的潜在空间(Latent Space),捕捉图像更本质的信息;
    2、对潜在空间中的图片添加噪声,进行扩散过程(Diffusion Process);
    3、通过CLIP文本编码器将输入的描述语转换为去噪过程的条件(Conditioning);
    4、基于一些条件对图像进行去噪(Denoising)以获得生成图片的潜在表示,去噪步骤可以灵活地以文本、图像和其他形式为条件(以文本为条件即 text2img、以图像为条件即 img2img);
    5、图像解码器通过将图像从潜在空间转换回像素空间来生成最终图像。
    image.png

    2024-05-30 14:36:05
    赞同 1 展开评论
问答地址: