SDXL1.0发布了!
这种感觉,就像夏天喝了一杯冰冷的拿铁可乐,太爽了。
注意,某些logo也可以正确输入了,比如SDXL。
肖像
GUCCI
珠宝-微距
油画-战火情侣
黑白片
可以看到,作为基础大模型(元祖模型),SD1.0和0.9一样,分为BASE和refine两个模型。它建立在由 3.5B 参数基础模型和 6.6B 参数的REFINE模型组成的创新新架构之上,全部采用原生 1024x1024 分辨率。和基于512*512进行训练的1.5版本相比,当然实力完全不同。
SDXL的另一个大特点是文本图像对齐能力大幅提高。它只需几个字即可创建复杂、详细且美观的图像。用户不再需要调用“杰作”等限定词来获得高质量的图像。此外,SDXL 可以理解“红场”(著名地点)与“红场”(形状)等概念之间的差异;简单来说,只要你善用翻译,哪怕不懂英文也能搞懂描述词。
目前,SDXL1.0模型已经发布,和0.9相比,其实模型整体改动并不是很大,类似SD1.4和SD1.5的差别。
最重要的一点是,正式发布的模型体积压缩到了6G左右,这让8G显卡有可能运行模型了。
想要运行模型,目前普及度最高的SDWEBUI版本,你需要升级到官方1.5版本,(不是秋叶启动器的版本)
但是,必须客观的说,SDWEBUI1.5版本并不是最优解。
原因很多,其中最重要的是SDXL的两模型模式。
SDWEBUI一向都是把模型常驻显存之内的,这意味着,它在显存优化这些方面做得比较差。一方面是无法同时自动调用两阶段模型,另一方面是常驻显存无法完全释放。
SDWEBUI常驻4-5G显存不等。
目前SDWEBUI跑一阶段模型是没问题的。但是,对应两阶段模型来说,其实你不可以错过的是实际上参数规模达到65亿的refine模型。
总之,如果你用SDWEBUI,那么显存小于8G的你要跑两阶段模型,很可能一不小心就…………喜提out of memory。
那么,还有别的办法吗?
当然!我们这里给大家推荐COMFY-UI这个集成包。
简单来说,SD作为开源模型,就会有很多开源的UI支持它;sdwebui是其中之一,comfy-ui也是其中之一。
最重要的是,COMFY在显存上的优化极其优秀。
不跑图不占用显存。
跑SDXL占用不高于8G显存(SD官方可没骗咱)
它是怎么实现的呢?简单来说就是工作流模式,跑完一阶段模型,模型自动从显存卸载,所以它的界面就像连连看,自我定制的自由度非常高。
因为跑完一阶段就可以卸掉BASE模型,那么运行两阶段模型自然也是没问题。要知道,目前SDWEBUI要跑第二阶段,需要手动更换一次模型。试多了,你就会不厌其烦!
完美支持两阶段模型
最近COMFY的插件也在加速丰富起来,开源社区的开发主力,都非常看好它。
COMFY安装包比较简单,下载解压即可。后面需要一些包括工作流设置,我们一并在集成包内附上。
COMFY的精髓在于工作流,通过保存好的工作流体系,它甚至可以实现完全自动化的生产,这是我们实现从人工跑图到自动跑图跃升的关键。