qq_68607063的博客

原创 diffusion 学习笔记

除了输入一张有噪声的图片，还要输入一个参数，表示这种图片的噪声程度。输入一张图片，预测它的噪声，再和原始图片进行相减操作得到去噪的图片。X0表示原始图像，ε表示噪声，t越大αt越小，加入的噪声就越大。先对输入图片进行Encoder，再对这个向量加入noise。：从一张有噪声的图片通过denoise逐步去除噪声。把大图下采样得到小图，小图通过Decoder变为大图。不需要labeled的配对数据。Denoise内部的操作。把一段文字叙述转化为向量。Decoder的训练过程。