SDXL1.0 简介?
2023年7月26日:StabilityAI发布了SDXL1.0是的下一代文生图模型,是最棒的开源生图模型。SDXL1.0的发布引起了广大用户的关注和热议。在这个版本中,SDXL团队对生图质量、Prompt的设定、模型规模、使用方法和功能介绍等方面都进行了全面的升级和改进。
本文将深入探究SDXL1.0的各个具体特点和突出优势,并为读者详细介绍如何使用这一强大的开源生图模型。
SDXL 1.0包括两种不同的模型:
sdxml -base-1.0:生成1024 x 1024图像的基本文本到图像模型。基本模型使用OpenCLIP-ViT/G和CLIP-ViT/L进行文本编码。
sdxml -refiner-1.0:一个图像到图像的模型,用于细化基本模型的潜在输出,可以生成更高保真度的图像。细化模型只使用OpenCLIP-ViT/G模型。
SDXL 1.0的refiner是基于OpenCLIP-ViT/G的具有6.6B参数模是目前可用的最强大的开放访问图像模型之一。
base模型在第一阶段创建(有噪声的)结果,然后由专门为最后去噪步骤设计的refiner模型进一步处理(基本模型也可以作为一个模块单独使用),以下是一个官方的样例
SDXL1.0 更新?
SDXL1.0版本相较于0.9版本,在用户偏好上有了较大的提升。根据数据统计,0.9版本的偏好率为24.4%,而1.0新版偏好率高达26.2%,显著超过了0.9版本。可见,SDXL1.0生成的图像得到用户更高的偏好,生图质量更好。这也验证了SDXL团队对生图质量的极致追求和不懈努力。
1.StabilityAI的最佳图像模型。
这一点毫无疑问了,官方说进行了各种对比测试后,发现人们更喜欢SDXL1.0生成的图像。这些数据来自于Discord和外部测试。从数据来看SDXL系列效果是吊打SD1.5和SD2.1(2号版本真的是….)
2.更适合复杂概念和风格的图像创作
SDXL几乎能以任何艺术样式生成高质量图像,且在逼真图像方面表现优秀。与之前版本相比,在对比度,灯光和阴影等方面有更好的表现。默认分辨达到了1024×1024 。此外,SDXL能够生成手部、文字或空间布局类图片 (如有个女人在追一条狗)。
- 提示词更简单效果更好
只需要少量的提示词就能生成复杂详细而富有美感的图片。现在不需要使用“大师级” 等牛逼词汇就能生成高质量的图片了。此外,SDXL还能正确理解 “The Red Square” 多种含义(著名建筑和红色方块)。
4.最大的开源图像模型
SDXL1.0 是参数最多的开源绘画模型。基于一个创新的架构,由一个3.5B的基础模型和6.6B的精炼模型构成。
这个两步架构允许图像生成保持鲁棒性,同时不牺牲速度或者更多计算资源。
SDXL 1.0应该能很好地在具有8GB VRAM 的消费级GPU 或者现成的云实例上运行。
5.微调和高级控制
SDXL1.0模型的微调更加简单,制作Lora和Checkpoint的数据量会更少。Stability团队正在为SDXL设计专用的T2I/ControlNet,这些功能目前处于β阶段。
总的来说,SDXL 1.0目前是最好的开源图像生成模型,且在图像质量、样式控制以及复杂概念生成方面优于其他模型。(由Claude做得总结。哈哈…)
介绍么就大概是这些了。下面就说说那些软件支持SDXL吧。
SDXL1.0本地部署
随着SDXL1.0正式版的发布,支持SDXL模型的软件越来越多了。
目前比较推荐的是下面两款开源软件。
A.Stable Diffusion最流行的AI绘画软件
A.本地部署,小白不想折腾的话,可以使用秋葉aaaki大佬的整合包,然后,如果版本不是最新的,请升级最新版本,即可体验SDXL1.0
B.Stable Diffusion Webui 本地部署
相信99%朋友都是用Stable Diffusion WebUI做图的。如果你已经安装了sd webUI,那么你只要进入到sd webUI的安装目录。运行终端,输入git pull,就好了。
如果你之前没有安装过sd webUI。那么你只能网上找其他人的教程了,安装sd webUI的教程已经非常非常多了。
如果你使用不了git pull。你可以尝试
1.看看你的电脑是否安装了git
2.查看一下sd webUI目录下是否有.git文件夹。如果没有,说明你当时安装sdwebUI的时候不是通过git clone命令安装的。
当你更新成功后,启动sd webUI,会报错。提示你输入命令git clone “https://github.com/Stability-AI/generative-models.git” “…\repositories\generative-models”。
这个直接在终端输入就可以了,就是下载generative-models到sd webUI的repositories文件夹下。
如果这时候,还启动不了,那就添加一下安全权限 git config –global –add safe.directory …/repositories/generative-models
如果这个时候你还是运行不了,那么很可能是因为,一般人使用sd的时候都会关掉魔法,但是sd webUI更新后第一次启动,会自动去更新generative-models,关了魔法就连接不上了。所以要先开魔法,再打开sd webUI,等更新好了后。在关魔法,重新启动sd webUI就好了。
这就升级好了,然后到stabilityai/stable-diffusion-xl-base-1.0 at main下载sdxl1.0模型,并放到Stable-diffusion目录下就可以了。
SDXL1.0在线体验
- Discord 服务器
点击上方链接加入 SD XL1.0 官方服务器,点击“SDXL BETA BOT”内的任一频道,在文本框内输入 /Dream,再输入文本提示词,按 Enter 发生出去就可以了。文生图功能目前可以免费使用,但是会有使用频率限制,受限时可以等待片刻或者换另一个频道尝试。
- Clipdrop
Clipdrop 是 Stability AI 收购的一家在线 AI 图像处理工具,现在也内置了最新的 SDXL 1.0 模型,并且新增了画面横纵比和负面提示词 2 项功能。生成服务也是可以免费使用的,但是图像右下角会有 Clipdrop 的水印。
请登录后查看评论内容