目录
前言
我向来不喜欢搞一些没有用的概念,所以直接整理可能用到的东西。
sd简单的说就是一个更据描述生成不同风格的图片的东西,与之对应的还有mj,但是我绝对不会使用他,为什么,因为收费,可以不赚钱,但是绝对不能往里搭,无非浪费一些时间而已
软件下载
- 秋葉aaaki 唯一账号:https://space.bilibili.com/12566101
概述
Stable Diffusion模型并不是单一的文生图模型,而是多个模型组成的运作系统,其中的技术可以拆解为3个结构来看:
- ClipText 文本编码器 :用于解析提示词的Clip模型
- 编码器Clip ,它是由OpenAI公司开发的模型,包括文本编码和图像编码2个部分,分别用于提取文本和图像的特征,通过搜集大量网络上的图像和文字信息再对Clip模型进行训练,可以实现文本和图像的对应关系。
- 在SD模型运作过程中,它可以提取提示词文本部分的特征传递给图像生成器,让模型理解我们输入的提示词内容,从而达到文本控制图像生成的目的。
- Diffusion扩散模型 : 用于生成图像的U-Net 和Sche duler
- 就是更据算法什么东西的生成图像
- VAE模型 : 用于压缩和恢复的图像解码器
- 相当于滤镜
SD安装
1、安装软件
2、启动
3、配置