设置训练使用的 Stable Diffusion 大模型,“Model Quic Pick”这里可以选择一些 SD 的基础大模型,训练的时候会先去 HuggingFace 下载,不过我实际测试跑不同,所以这里选择 custom,然后自己上传一个模型,因为训练图片是真实世界的狗子,所以这里使用了realisticVisionV51(使用AutoDL镜像的同学不用再上传,已经内置了),这是...
参数向量简单来说就是关键词SKS经过语言模型处理后所得到的一个向量数据,后续的Diffusion Model将使用这些由输入指令“A photo of SKS”转换而来的一组向量数据作为实际的输入参数,来影响并指导Diffusion生成图像的过程。 通过训练,Textual Inversion为SKS关键词找到了一个最合适的向量【训练前,如果语言模型原本不认识SKS...
设置训练使用的 Stable Diffusion 大模型,“Model Quic Pick”这里可以选择一些 SD 的基础大模型,训练的时候会先去 HuggingFace 下载,不过我实际测试跑不同,所以这里选择 custom,然后自己上传一个模型,因为训练图片是真实世界的狗子,所以这里使用了realisticVisionV51(使用AutoDL镜像的同学不用再上传,已经内置了),这是...
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16).to(“cuda”) prompt = “A backpack” image = pipe(prompt, num_inference_steps=50, guidance_scale=7.5).images[0] image.save(“cat-backpack.png”) LoRA LoRA的全称是Low-Rank Adaptation,即大型语言模型的低阶自...
设置训练使用的 Stable Diffusion 大模型,“Model Quic Pick”这里可以选择一些 SD 的基础大模型,训练的时候会先去 HuggingFace 下载,不过我实际测试跑不同,所以这里选择 custom,然后自己上传一个模型,因为训练图片是真实世界的狗子,所以这里使用了realisticVisionV51(使用AutoDL镜像的同学不用再上传,已经内置了),这是...
The ControlNet clones the weights of a large diffusion model into a "trainable copy" and a "locked copy" Step2: 将得到的两个模型按照下图的模式一起训练,其中可训练模型中的 Decoder 结构是“零卷积”结构 The trainable and locked neural network blocks are connected with an unique type of convoluti...
使用Stable Diffusion Web Ui 界面介绍 txt2img img2img 界面汉化 prompt语法 示例 模型 Prompt Negative prompt 参数设置 生成 Stable Diffusion资源列表 1. Hugging Face 2. Civitai 3. Discord 4. Rentry for SD 什么是Stable Diffusion Stable Diffusion是一种潜在扩散模型(Latent Diffusion Model),能够从文本描...
LoRA是Low-Rank Adaption of large language model的缩写，这个方法是一种大语言模型fine-tune的方法。主...
LoRA是 Low-Rank Adaptation Models的缩写，意思是低秩适应模型。LoRA原本并非用于AI绘画领域，它是微软的...
Stable Diffusion 是 2022 年发布的深度学习文字到图像生成模型。它主要用于根据文字的描述产生详细图像,能够在几秒钟内创作出令人惊叹的艺术作品,本文是一篇使用入门教程。 硬件要求 建议使用不少于 16 GB 内存,并有 60GB 以上的硬盘空间。需要用到 CUDA 架构,推荐使用 N 卡。(目前已经有了对 A 卡的相关支持,但...