没记错的话,是vae的问题,需要sdxl的vae。 来自Android客户端3楼2023-09-29 21:31 收起回复 xlxxlxll 核心吧友 6 可能是显卡问题,我用一模一样的模型,提示词,配置,在线出图就比本地的sd质量好 来自Android客户端4楼2023-09-29 23:47 收起回复 古月...
Refiner模型是SDXL模型的第二阶段,其主要任务是对Base模型生成的图像潜在特征进行精细化处理。Refiner模型通过U-Net、VAE和CLIP Text Encoder等模块,对Base模型生成的图像进行进一步的优化和调整,使得生成的图像更加符合输入的文本描述。Refiner模型在本质上是在做图生图的工作,通过不断优化和调整,使得生成的图像质量更高...
Xl的vae,如果你用的是xl的模型,vae也要选择xl特定的vae,不是自动。还有就是去秋叶的高级设置里,把vae的nan check那些再全部打开,重启sd 来自Android客户端11楼2023-09-05 19:09 收起回复 sdzxzh6 初级粉丝 1 报错是tagger包有问题,删掉。这个问题有人在git提出过。图片是vae有问题,换成xl专用的vae,参数可...
SDXL1.0的vae修复版大模型和SDXL版controlnet的canny、depth模型下载 3.3万 106 7:04 App 干货!在ComfyUI中使用ControlNet的方法分享,附详细电池流程讲解! 7645 3 1:40 App LEOSAM's HelloWorld 新世界 | SDXL真实感大模型效果演示 10.2万 97 5:02 App 【COMFYUI周报9.12】只需要4GB整合包+启动器就可以畅...
很难说这是否有所帮助,或者是否有任何影响。此时,我怀疑 SDXL 的 VAE 并不适合这个任务,其中大多数训练图像包含极大量的细节。bigASP 在生成细致的、近距离的皮肤纹理方面非常出色,但像透明尼龙这样的高频图案会导致 VAE 出现问题。我猜想这里需要更多的研究。或者,天哪,更多的训练……...
森林火焱 核心吧友 7 一般情况下VAE我VAE设置AUTO,另外SDXL VAE有个最原始的,名字忘了,固定用它就行,其他的都不稳定。 7楼2024-03-07 09:06 收起回复 math781 活跃吧友 4 显存爆了,把生成图片的分辨率调低一些 来自Android客户端8楼2024-03-08 08:05 回复 ...
对Stable Diffusion 1.x-2.x的U-Net,VAE,CLIP Text Encoder三大核心模型都做了改进。 增加一个独立的基于Latent的Refiner模型,也是一个扩散模型,用来提升生成图像的精细化程度。 设计了很多训练Tricks,包括图像尺寸条件化策略、图像裁剪参数条件化策略以及多尺度训练策略等。 先发布Stable Diffusion XL 0.9测试版本,基...
1.VQ-VAE模型：VQ-VAE是一种基于向量量化和变分自编码器的生成模型。它在图像压缩和重建方面表现出色，能够以高质量还原出图细节，并在较低的压缩比下保持图像的逼真度。2.StyleGAN模型：StyleGAN是一种基于生成对抗网络(GAN)的模型。它能够生成具有高度逼真的图像，具有出色的图像合成和变换能力。设计师可以使用...
关于SDXL的生态目前还未完全稳定,但是不得不提到的就是SDXL的在VAE,CLIP,UNET三大组件的巨大提升,其101亿的参数量是原本SD的N倍,那么对于SDXL的生态介绍我们再次重复一遍。4G的显存都能跑SDXL意味着将来大模型Lora将降低其大小,炼丹炉压力更小~ SDXL为什么强?
SDXL-VAE的权重也已经单独上传到huggingface上(https://huggingface.co/stabilityai/sdxl-vae),一个要注意的点是SDXL-VAE采用float16会出现溢出(具体见这里),必须要使用float32来进行推理,但是之前的版本使用float16大部分情况都是可以的。VAE的重建能力对SD生成的图像质量还是比较重要的,SD生成的图像容易出现小物体...