StableDiffusion-02 LoRA上手使用实测 尝试生成图片 使用多个LoRA 调整LoRA效果 10分钟上手 多图

简介: StableDiffusion-02 LoRA上手使用实测 尝试生成图片 使用多个LoRA 调整LoRA效果 10分钟上手 多图

准备工作

请你确保,你已经完成了 StableDiffusion-01 这一节的内容,可以顺利的运行SD,并且可以正常的生成图片。

本节我们就尝试使用LoRA并生成图片。


介绍 LoRA

Stable Diffusion中的LoRA(Low-Rank Adaptation,低秩自适应)是一种针对大型模型微调的技术,旨在加速模型的训练过程并显著减少模型文件的存储成本。这项技术通过冻结原有基础模型的权重层并重新计算,实现了快速的训练速度和较小的模型文件大小,从而提高了训练效率和降低了存储成本。


下载 LoRA

Liblib模型下载:liblib官方

Civitai模型下载:Civitai C站官方

这种左上角写:LoRA的,便是我们要下载的模型,你可以自己挑选喜欢的。

可以在网上下载到关于Lora的模型,相比于实际的模型,它会小很多。

选择 Lora选项卡:

可以看到我们需要把LoRA放到目录下,目前我下载了:五彩斑斓_1.0.safetensors

把该文件,放到上述的xxx/models/lora目录下即可

加载LoRA

重启你的服务,这个时候重新选择LoRA选项卡就可以看到了

使用 LoRA

此时点击该 Lora就会看到,Prompt提示词中多了:

<lora:新蜡笔:1>

此时,我们继续往提示词中添加内容即可:

<lora:新蜡笔:1>, xxxxx(你的提示词,:1表示占比,可以降低比如:0.7)
• 1

按照上一节,我们的配置,生成图片:

测试案例

Prompt

<lora:新蜡笔:1>, Fashion Girl, (height: 1.1) , (color: 0.9) , (masterpiece: 1.2) , extremely complex, best quality, detail, 8k, height, 1 girl, mature female, short hair, real light source, focus person lens, close-up, uP front, subjective perspective, male focus, looking at the audience, solo, medium lens, define 'real' light source, straight line, (above: 0.9) , (over-the-shoulder shot) , (chest: 1.1) , Tall Woman, (crotch: 1.1) , shot from a distance, looking away, gradation of hair, indigo eyes, delicate eyes, shy expression, (a slim woman standing on the observation deck: 1.1) , view from a tall observation tower, (wearing a light-colored Jyoshi Kousei suit: 1.05) , (thick-waisted shirt) , (pleated skirt) , aloof expression, small breasts, outdoor, landscape, trees, plants, lakes, (Blue Sky: 0.3) ,

Negative Prompt

nsfw,yallow,(((pubic))), ((((pubic_hair)))),sketch, duplicate, ugly, huge eyes, text, l

其他参数

保持和上一节一致即可,详见 StableDiffusion-01中的内容。

生成图片

多LoRA

同理,我们下载多个 LoRA,放到指定的目录,即可看到:

多LoRA案例

调整 LoRA的占比

LoRA列表,这次选择两个,分别配置占比为1和0.4

Prompt

 <lora:新蜡笔:1> <lora:gfzzjl-SDXL:0.4>,girl swims underwater,hyper detailed render style,glow,yellow,blue,brush,surreal oil painting,shiny eyes,head closeup,exaggerated perspective,tyndall effect,water drops,mother of pearl iridescence,holographic white,black background,

Negative Prompt

sketches, (worst quality:2), (low quality:2), (normal quality:2), lowers, normal qua

出图结果

目录
相关文章
|
7月前
|
机器学习/深度学习 物联网 开发者
秒级生图,SDXL-turbo、LCM-SDXL魔搭社区最佳实践
最近一个月,快速生图成为文生图领域的热点,其中比较典型的两种方式的代表模型分别为SDXL-turbo 和 LCM-SDXL。
|
2月前
|
物联网
StableDiffusion-04 (炼丹篇) 15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(二)
StableDiffusion-04 (炼丹篇) 15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(二)
39 0
|
2月前
|
物联网
StableDiffusion-04 (炼丹篇) 15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(一)
StableDiffusion-04 (炼丹篇) 15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(一)
38 0
|
10天前
|
机器学习/深度学习 数据采集 人工智能
基于可图Kolors的皮影戏风格LoRA训练&创作
可图Kolors-LoRA风格故事挑战赛比赛过程心得分享
|
2月前
|
物联网
StableDiffusion-03 (准备篇)15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(二)
StableDiffusion-03 (准备篇)15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(二)
38 1
|
3月前
|
存储 人工智能 物联网
LoRA大模型微调的利器
LoRA模型是小型的Stable Diffusion模型,它们对checkpoint模型进行微小的调整。它们的体积通常是检查点模型的10到100分之一。因为体积小,效果好,所以lora模型的使用程度比较高。
LoRA大模型微调的利器
|
2月前
|
并行计算 Ubuntu 物联网
StableDiffusion-03 (准备篇)15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(一)
StableDiffusion-03 (准备篇)15分钟 部署服务并进行LoRA微调全过程详细记录 不到20张百变小樱Sakura微调 3090(24GB) 学不会你打我!(一)
32 0
|
6月前
|
前端开发 异构计算 API
探索Stable Diffusion:从零开始的代码接入创意图像生成指南
探索Stable Diffusion,了解这一图像生成技术,适用于创意设计、内容生成和前端应用。本文从基本概念到实战,教你如何用Python和相关库搭建环境,通过GPU加速,生成基于文本提示的图像。学习多样性和风格融合技巧,解决实践中遇到的问题,如内存溢出和图像模糊。前端开发者可将模型部署为API,实现实时动态图像生成,提升用户体验。一起发掘Stable Diffusion在艺术和设计领域的无限潜力!
300 2
|
7月前
|
人工智能 自然语言处理 数据可视化
开源单图生成3D模型TripoSR有哪些特点?
【2月更文挑战第16天】开源单图生成3D模型TripoSR有哪些特点?
182 2
开源单图生成3D模型TripoSR有哪些特点?
|
7月前
|
机器学习/深度学习 人工智能 Cloud Native
秒速出图!体验 TensorRT 加速 Stable Diffusion 图像创作
秒速出图!体验 TensorRT 加速 Stable Diffusion 图像创作
140775 27