Diffusion Model-1

image-20240419163427894

image-20240419163505200

Denoising Model 采用的是同一个模块,但是由于 denoising 过程中图片的状态可能非常不一样,所以输入 denoising model 的时候还有图片噪声的状态

Denoising

Denoisng Model 内部有着一个 noise predictor,负责产生一个 noise 图像,再把图像与 noise 相减输出图片(问题一:为什么 Denoising Model 不直接预测输出图片呢?)

image-20240419163210952

对于目前主流文生图的模型:

image-20240419163115507

FID

image-20240419164033386

image-20240419164258842