stable diffusion实践操作-VAE

本文专门开一节写图生图相关的内容,在看之前,可以同步关注:
stable diffusion实践操作

大部分底模有VAE,但是部分底模没有VAE,需要专门下载VAE才能使用。
最常用的VAE:vae-ft-mse-840000-ema-pruned
用来饱和度和细节提升

正文


1、 原理

VAE其中包括了编码器和解码器:
stable diffusion实践操作-VAE_第1张图片
在VAE的训练过程中,利用VAE的编码器对图片进行压缩,提取图片的潜在表征使得训练加速。
stable diffusion实践操作-VAE_第2张图片
还原过程,将图片解压使其还原成一个清晰的图片:
stable diffusion实践操作-VAE_第3张图片

2、 使用

2.1 增加饱和度

stable diffusion实践操作-VAE_第4张图片

2.2 增加细节

stable diffusion实践操作-VAE_第5张图片

你可能感兴趣的:(SD,stable,diffusion)