使用SDXL 系列大模型时,需要使用 --no-half-vae 模式,即在秋葉启动器中关闭 “VAE 模型半精度优化”选项。 生成的图像尺寸在 1024px 左右为佳,不能低于 768px; 下面以 sai_xl_canny_256lora 模型为例,为大家演示一下 xl 控制模型的用法。 ①选择一个 SDXL 系列的大模型,比如 sd_xl_base_1.0 或者 Dre...
大模型选择sd_xl_base,vae选择刚才下载的vae,底下会多出一个refiner菜单,模型选择sd_xl_refiner。尺寸一般就是1024*1024。首次出图会卡在下图这里,速度很慢,耐心等待,后续即可正常出图: 耐心等待 如果出现这个,则需要在启动参数中添加 “--no-half-vae”,或者直接耐心等待,系统会自动完成转换。 --no-half-vae...
self.vae = vae self.unet = unet self.text_encoder = text_encoder self.text_encoder_2 = text_encoder_2 self.tokenizer = tokenizer self.tokenizer_2 = tokenizer_2 self.unet = unet self.scheduler = scheduler self.vae_scale_factor = 2 ** (len(self.vae.config.block_out_channels) - 1) ...
vae_decoder = VAEDecoder(tiny_vae) ov_model = ov.convert_model(vae_decoder, example_input=torch.zeros((1,4,64,64))) ov.save_model(ov_model, output_path / "vae_decoder/openvino_model.xml") tiny_vae.save_config(output_path / "vae_decoder") convert_tiny_vae(save_path, model_dir) ...
2 -- SDXL1.0 大模型和 VAE 3 --SDXL1.0_control_collection 4-- IP-Adapter 插件 clip_g.pth,clip_h.pth 5 -- 若还有报错,请下载完整 downloads 文件夹 6 -- 生图测试和总结 6.--新增了 MistoLine 是一个可以适配任意类型线稿,准确性高,稳定性优秀的SDXL-ControlnetNet模型。大家可以尝试使用了...
stable-diffusion-webui/extensions/sd-webui-controlnet/annotator/downloads/openpose vae-ft-mse-840000-ema-pruned.ckpt SD1 VAE权重,可以让生成的更符合真实与生动。 https://pai-aigc-photog.oss-cn-hangzhou.aliyuncs.com/webui/vae-ft-mse-840000-ema-pruned.ckpt stable-diffusion-webui/models/VAE mad...
"/root/sd/stable-diffusion-xl-refiner-1.0", text_encoder_2=base.text_encoder_2,vae=base.vae, torch_dtype=torch.float16, use_safetensors=True, variant="fp16",) refiner.to("cuda") # Define how many steps and what % of steps to be run on each experts (80/20) here...
修改webui-user.bat文件,添加必要的启动参数,如--no-half-vae和--no-download-sd-model(可选)。 如果CUDA版本与PyTorch默认版本不兼容,需要修改launch_utils.py文件中的torch安装命令,指定与CUDA版本兼容的PyTorch版本。 下载并配置模型文件: 将下载的模型文件放置到stable-diffusion-webui\models\Stable-diffusion...
如果你想用 t2i 的方式来做,往上接一小段基本 workflow 的尾巴就可以,叫出 Ksampler 和 VAE decoder,前面的模型啊提示词啊都可以共用,最后把 image 接到 upscale 方块就好了。 如果你想要比对 upscale 前后的差异,也可以从这里多加一个 preview。
Step 1. Download the SDXL Turbo model Download theSDXL Turbo Model. Put it in thestable-diffusion-webui > models > Stable-diffusion. Step 2. Enter txt2img settings On thetxt2imgpage of AUTOMATIC1111, select thesd_xl_turbo_1.0_fp16model from theStable Diffusion Checkpointdropdown menu. ...