Stable Diffution已经很久了,大家也都用的也都很6了,对硬件要求还是挺高的,内存:不低于16 GB,GPU:不低于6 GB显存,显卡3060为佳,整个一键安装启动包加上模型上了100G空间,对于普通用户还是稍微有点门槛的!最近看到网易居然搞了个云端Stable Diffution,在线出图?很好奇进去试用了一下!
他把Stable Diffution嵌在了网易云课堂页面,里面有个AI绘画工坊
注册一个账号,每天有20次出图的次数,但对于公司做项目的美术来说,20次基本上就是毛毛雨了,没啥实际意义。估计后面还要付费买次数,对于出图数量要求不高的玩家来说还是挺方便的,至少不用本地部署了,挑选一些合适的模型就可以在线出图了。
有一个Stable Diffusion入门教程,里面介绍了网易版SD精选的一些主流模型,以及附带20个LORA主流模型,这些都可以逐一去尝试看看有没有适合自己项目的模型,Stable Diffusion是一种强大的图像生成AI,它可以根据输入的文字描述词(prompt)来绘制图像。在Stable Diffusion上完成优秀图像的制作需要有正确的模型+准确的提示词+参数调整+后期处理技术,他们通过对多位大神和官方的文档资料进行整理与简要总结,能帮助大家更快的上手Stable Diffusion~
Stable Diffusion官方会提供SD模型(目前更新到Stable Diffusion 2.1-v)。除此之外,我们也可以从Civitai上面获取模型。Civitai是目前一个比较成熟的Stable Diffusion模型社区,里面拥有几千个模型,以及数十万张附带提示词的图像,这些都让Stable Diffusion的学习成本降低了很多。
我们目前使用比较多的主要包括2类模型:大模型、微调模型
- 大模型:常见的大模型一般为Checkpoint(ckpt)和safetensors两种格式,大模型一般是通过Dreambooth训练得到,特点是出图效果好,但是由于训练的是一个完整的新模型,所以训练速度普遍偏慢,生成模型的文件较大,一般都在几个G。
- 微调模型:微调模型需要配合大模型使用,常见包括Embedding模型、Hypernetwork模型、Lora模型、VAE模型(常用的是Embedding和Lora模型)。
-
- Embedding模型:主要用于定义新关键字来生成新的对象或风格的小文件(图像风格引导)。不会改变模型,只是定义新的关键字来实现某些样式。
- LoRA模型:简单理解就是大模型的补丁,可以用于修改图像风格/增加细节。因为效果很好并且训练较为快速和简单,所以性价比最高,也是目前最常用的微调模型。
我们也在网易SD里面下载并安装了C站表现效果好的大模型和LoRA模型,大家可以根据实际做图需求进行模型的选择。
可以选择对应行业的大模型,提供了一些主流的模板,选择一个模型进入之后发现界面跟PC版基本一样的
有兴趣的大家可以去尝试,总的来说出图速度还是很快的,排队人数少,不用电脑配置高,网速快就行,优点还是明显的,缺点是提供的模型不一定是你项目所需的,免费次数用完以后需要付费购买,按照自己所需可以去尝试一下!