AI学习笔记|为什么你用Stable Diffusion画的那么模糊?如何 ...

2023-4-13 08:51| 发布者: 挖安琥| 查看: 182| 评论: 2

摘要: 今天看到一个对比,用Stable Diffusion的基础模型和付费版的Midjoureny V5做对比,结果当然是Stable Diffusion表现一塌糊涂。和Midjoureny内置了大量的模型相比,Stable Diffusion基础模型基本上没什么价值。Stable ...

今天看到一个对比,用Stable Diffusion的基础模型和付费版的Midjoureny V5做对比,结果当然是Stable Diffusion表现一塌糊涂。

和Midjoureny内置了大量的模型相比,Stable Diffusion基础模型基本上没什么价值。

Stable Diffusion作为开源软件,最大的特点就是模型自由搭配组合,最著名的模型分享站点是C站。

对于AI绘画爱好者来说,C站下载量排在前面的可以无脑下载。

你永远可以相信全世界的LSP们的集体审美:

我没看到黑人美人鱼,没看到吊眼角的亚洲人,没看到以肥为美的LGBT... ...

无论是真人模型还是动漫模型,都是一水的马甲线大长腿的美少女,当然偶尔也有花样美男。



PS,不要被下载量最大的前两个预览图迷惑,这两个是综合类的模型,画真人美女更出色,只是作者为了低调,放了很朴素的图,但依然被LSP们顶到下载前列。

动漫题材的模型中,MIX-Pro是非常出色的一个,下载量也比较大。



在使用这个模型的时候,我发现一个问题:我和C站网友做的画面几乎一致,基本复现的同时,画面却非常灰暗,不像网友做的那么靓丽。

比如我用了这一段提示词。

正向:

Original Characters, Natural Volumetric Lighting And Best Shadows, Deep Depth Of Field, Sharp Focus, Portrait Of Stunningly Beautiful Petite Girl, Soft Delicate Beautiful Attractive Face With Alluring Brown Eyes, Lovely Medium Small Breasts, Sharp Eyeliner, Seductive Smiling, Closed Mouth, Windswept Disheveled Brown Hair, Thick Layered Medium Hairstyles, Blush Eyeshadow With Thick Eyelashes, Parted Lips, Oversized Straw Sun Hat, Single Ribbon Bow, White Rustic One-piece Dress Long, (Flutter In The Wind:1.1), (Ripe Yellow Rye Field Under Beautiful Summer Sunset Sky With Clouds:1.2), (Highest Quality, Amazing Details:1.4), Masterpiece, Bloom, Picturesque, Vivid Watercolor Paintings,White gloves

反向(比较随意和大同小异)。

(worst quality, low quality, loli, child, infant, baby:1.4), lowres, blurry, bad anatomy, bad hands, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, (signature, watermark, username,letter, letterboxed, copyright name, copyright, chinese text, artist name, name tag, company name, name tag, text, error:1.5)

我画出来的画面是这样的:



虽然很好看,但画面明显不够靓丽,哪里出问题了?

这种情况就是因为没有使用正确的VAE。

什么是VAE?

VAE 的全称是Variational Auto-Encoder,翻译过来是变分自动编码器,本质上是一种训练模型,Stable Diffusion里的VAE主要是模型作者将训练好的模型“解压”的解码工具。

在C站下载模型,需要特定VAE的情况下,会提示下载链接。



VAE文件扩展名是CKPT或者PT,安装路径是 models\VAE ,需要和早期的模型文件区分开,早期模型文件扩展名也是CKPT,但模型文件一般2G以上,而VAE文件只有几百兆。



拷贝完毕后,刷新首页外挂VAE模型,选中对应的VAE文件,重新生成即可。



新生成的画面更加清晰和透彻,效果远好于不使用VAE。

那么问题来了,由于搜罗模型非常费劲,有些模型被C站下架,如果下载模型的时候没有找到VAE文件怎么办?

可以下载一些通用VAE,可能效果比专用VAE略差一些,但基本能够解决颜色、亮度失真的问题。有时候生成的画面会过亮,这就需要更换一下通用VAE文件,尝试生成最好的结果。

比如,我用通用VAE生成的图像是这样的:



和专用VAE几乎没有太大区别(为什么帽檐破了??)。


本文用到的模型文件下载:

1、Mix-Pro V3:https://www.123pan.com/s/ztzbVv-LV5Eh.html

2、Mix-Pro V4:

https://civitai-delivery-worker-prod-2023-04-01.5ac0637cfd0766c97916cefa3764fbdf.r2.cloudflarestorage.com/7817/model/mixProV4.Cqhm.safetensors?X-Amz-Expires=86400&response-content-disposition=attachment%3B%20filename%3D%22mixProV4_v4.safetensors%22&X-Amz-Algorithm=AWS4-HMAC-SHA256&X-Amz-Credential=2fea663d76bd24a496545da373d610fc/20230410/us-east-1/s3/aws4_request&X-Amz-Date=20230410T145046Z&X-Amz-SignedHeaders=host&X-Amz-Signature=a6ff2086a49d41384b13197f9840902f94ecb5b978ebe496f66f189ea54fd4e4

(该地址需科学上网,无法直接下载,但复制地址至迅雷可下载)

3、本模型专用VAE:

https://civitai-delivery-worker-prod-2023-04-01.5ac0637cfd0766c97916cefa3764fbdf.r2.cloudflarestorage.com/7817/training-images/klF8Anime2.43oI.ckpt?X-Amz-Expires=86400&response-content-disposition=attachment%3B%20filename%3D%22kl-f8-anime2.ckpt%22&X-Amz-Algorithm=AWS4-HMAC-SHA256&X-Amz-Credential=2fea663d76bd24a496545da373d610fc/20230410/us-east-1/s3/aws4_request&X-Amz-Date=20230410T145308Z&X-Amz-SignedHeaders=host&X-Amz-Signature=9c7412cb6b5825c80a8476c914b0a7d8564a2de70f8610d9f9287a93a209e0e3

(该地址需科学上网,无法直接下载,但复制地址至迅雷可下载)

4、通用VAE(三个,可分别尝试最佳效果):

https://www.123pan.com/s/ztzbVv-lTqEh.html

https://www.123pan.com/s/ztzbVv-7TqEh.html

https://www.123pan.com/s/ztzbVv-STqEh.html


路过

雷人

握手

鲜花

鸡蛋
版权声明:免责声明:文章信息来源于网络以及网友投稿,本网站只负责对文章进行整理、排版、编辑,是出于传递 更多信息之目的, 并不意味着赞同其观点或证实其内容的真实性,如本站文章和转稿涉及版权等问题,请作者在及时联系本站,我们会尽快处理。
已有 2 人参与

会员评论

相关分类

 万奢网手机版

官网微博:万奢网服务平台

今日头条二维码 1 微信公众号二维码 1 抖音小程序二维码 1
上海万湖珠宝贸易有限公司 地址:上海市宝山区共和新路4727号新陆国际大厦1003-1007室 网站经营许可证 备案号:沪ICP备11005343号-12012-2019
万奢网主要专注于手表回收,二手名表回收/销售业务,可免费鉴定(手表真假),评估手表回收价格,正规手表回收公司,宝山实体店,支持全国范围上门回收手表
返回顶部