Stable Diffusion小白入门教程 | 提示词教程 阿里云专属

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
可观测可视化 Grafana 版,10个用户账号 1个月
简介: SD小白入门教程 | 提示词教程 阿里云专属

常见问题排查
td {white-space:nowrap;border:1px solid #dee0e3;font-size:10pt;font-style:normal;font-weight:normal;vertical-align:middle;word-break:normal;word-wrap:normal;}

  • CUDA out of memory: 炸显存 换启动参数 换显卡
  • DefaultCPUAllocator: 炸内存 加虚拟内存 加内存条
  • CUDA driver initialization failed: 装CUDA驱动
  • Training models with lowvram not possible: 这点显存还想炼丹?
    部署流程
    基础部署流程同云服务器部署步骤一样
    注意:显卡配置要求为N卡优先,适配程度高,CPU与主板要求不高,但需要跟显卡适配,运行过程温度较高,所以散热需要跟上,需要ATX3.0电源或者850W以上,可以物理降温,空调拉倒最低
    本地部署步骤,下面有一键安装包无需任何操作,不需要准备任何环境,但基础环境需要自己准备,方便后续使用
    1.优先有N卡的来,1060ti也能玩,A卡能玩吗?也能玩,但是A卡的教程少,内存不够的也劝退,总之AI有风险,N卡在咆哮。
    2.论文和资料极其多,丧心病狂的多
    3.苹果电脑需要系统在12.1+但是建议大家N卡
    4.笔记本也可以,所有的N卡在低配环境下可以使用CPU跑图,,但是建议大家N卡(算了手动滑稽)
    5.以上条件都不满足,online,在线社区邀请码官方更新中,邀请码每次更新就被抢光了,大家第一时间关注动态,交流群第一时间发送,内测链接,社区,邀请码实时更新
    相关论文:
    Stable Diffusion官网:https://beta.dreamstudio.ai/generate?from=%2Fdream controlnet 论文地址:https://arxiv.org/pdf/2302.05543.pdf 项目地址:https://github.com/lllyasviel/ControlNet Lora论文:https://arxiv.org/abs/2106.09685
    1.1优化启动/运行速度
    1.配置优先
    2.xfomers
    3.显卡驱动更新,对应显卡型号
    4.显卡优化至8G以下,8G以上不需要
    5.webui设置参数:
    1.基础环境准备(启动器无需安装,但建议安装git)
    git加速器:gitee/github边车devsidercar
    https://gitee.com/docmirror/dev-sidecar/releases
    注:会更改本地代理服务器,第二次上网需要关闭,或者长期开启,关闭在控制台设置:搜索代理,关闭代理,拉取ncpm/git远程仓库开启加速,
    物理加速:凌晨下载模型,仓库,拉取镜像等等
    Python:版本3.10或者3.9+
    Git:官网下载地址:
    Pytorch/CUDA:官网拉取GPU对应的pytorch https://pytorch.org/get-started/locally/
    2.配置要求N卡 参考主页AI算力跑图性能
    个人配置跟不上的推荐online
    3.模型拉取/模型之间的搭配,存放路径
    大模型存放路径:根路径\sd-webui-aki-v4\models\stable diffution
    Lora模型存放:根路径\sd-webui-aki-v4\models\Lora
    Lora如何展示预览图:在lora根目录下存放与Lora模型同名.png图片
    示例:
    [LoHa] Oboro_朧 Concept (With multires noise version)LoHa v1.0.png
    [LoHa] Oboro
    朧 Concept (With multires noise version)_LoHa v1.0.safetensors
    模型一般都是直接下载,插件支持扩展从网址安装/git clone 也支持
    Lora分门别类:
    1.1 WD tagger【线稿提示词提取】
    1.2插件下载
    1.3下载完插件记得重启UI
    1.4菜单功能解释
    2.爆显存参数设置:
    第一步:
    点击键盘 Win + R 然后输入%temp% 回车进入文件夹后删除所有缓存文件

第二步:
开始 - 设置 - 系统 - 存储 - 其他 - 删除文件夹里面的所有内容
开始 - 设置 - 系统 - 存储 - 临时文件 - 选择性删除

第三步:
我的电脑 - 上方路径处输入:%LocalAppData%\pip - 点击回车 - 把cache里的所有文件夹删掉

最后:
清空回收站
Tile VAE 防爆内存
4.1.先检查启动器参数:
4.2.外挂VAE选择自定义,不指定为autoencoder(自动解码)
4.3.文件位置:根目录/与exe同级别目录/webui-user.bat,使用文本编辑器打开/或者管理员打开
设置参数
webui-user.bat
@echo off

此处为新加配置,改动任何配置文件需要备份,一次性不要改动多处!!!

set PYTORCH_CUDA_ALLOC_CONF=max_split_size_mb:32
set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=

call webui.bat
4.4借助优化工具优化显存
推荐process lasso
删除缓存文件
1.把视频转为帧:一键切帧
切帧工具我发给你
2.图生图选择合适的seed
3.转到mov2mov,调整参数,controlnet,步数,重绘幅度
3.解决手部重绘问题
提示词:hand out of frame
反向:bad hands
https://github.com/jexom/sd-webui-depth-lib https://upscale.wiki/wiki/Model_Database 链接:https://pan.baidu.com/s/1jo8SraCqHA0shizeGA-eXQ?pwd=o6sl 提取码:o6sl
4.二次元画风参数
((8k, best quality)),((Exquisite facial features)),((Anime style:1.2)),(1girl, full body),((Standing posture ,looking at viewer )),((JK Style,JK short skirt, Football Baby Knee Socks,flashlight)),Cyberpunk, holographic aura, surreal science fiction art, future science fiction aesthetics, Han style clothing, clothing influenced by ancient Chinese operas,masterpiece, best quality,, masterpiece,best quality,ultra-detailed,very detailed illustrations,extremely detailed,intricate details,highres,super complex details,extremely detailed 8k cg wallpaper, blue eyes,white hair, cyberpunk, sense of technology.
反向提示词:
nsfw,(low quality,normal quality,worst quality,jpeg artifacts),cropped,monochrome,lowres,low saturation,mutated hands,mutated fingers,deformed,bad anatomy,disfigured,poorly drawn face,extra limb,ugly,poorly drawn hands,missing limb,floating limbs,disconnected limbs,out of focus,long neck,long body,extra fingers,fewer fingers,,(multi nipples),bad hands,signature,username,bad feet,blurry,bad body
参考图:
5.个人常用大模型总结
个人常用Lora模型:
重绘/inpainting/蒙版重绘/后期处理
1.放大系数选择:默认为regional时,根据画面大小,选择32/64,以重绘中心扩散半径计算,但系数越大,与周边融合越没有违和感
2.inpainting vs 蒙版重绘 vs regional
3.后期处理:upscale系数算法选择一致,scale在0时影响介入,1时效果最小
选择original 再搭配Adetailer 效果不明显,需要选择fill,单元格选择face_mesh ,重绘填充半径32-64效果搭配脸部手部,提示词系数目前推荐0.5以上
cn重绘 inpainting
视频教程
mov2mov vs Temporal
扩展加载自:https://github.com/Scholar01/sd-webui-mov2mov
1 是否闪动
mov2mov在tile模式下如果本身视频动作幅度较大,人不统一,会出现缺帧,少帧,甚至跳帧情况,除了一键合成工具,AR支持视频帧转入然后合成视频,不过AR本身操作的视频合成效果对帧数要求较高,最低30帧,如果需要一键切帧后再转视频有很多在线网站,但是推荐mov2mov形式合成
Temporal(Temporalkit)更轻量化,防呆一键操作

  • 支持多个 ebsynth 项目(以避免 20 个关键帧限制)。 - 自动场景检测,剪切和重组。 - 显著的性能提升。
    Temporal-Kit+EbSynth效果丝滑
    git地址:https://github.com/CiaraStrawberry/TemporalKit
    2.是否缺帧
    mov2mov会在1的场景下缺帧
    Temporal-Kit+EbSynth效果丝滑
    3.硬件要求
    都需要搭配stable diffusion,如果想要高质量视频可以后期对问题帧进行PS,转入inpainting再次绘制
    4.速率
    依赖硬件
    8.Controlnet预处理器作用
    8.1.controlnet开多个tab窗口unit
    1.打开设置
    2.搜索或者下拉至controlnet,改变最大单元格,重启UI。
    3.记得勾选启用才能使用,当启用后最新版会变成绿色
    4.预处理器作用
    renference_only(仅参考输入图)
    保留原图人物细节,画风迁移
    invert
    简单上色
    openpose(姿态提示)
    姿态参考(人物)
    seg
    色块提示(场景)
    shuffle
    重新分布图片色彩(色彩) 使用色彩图素材
    tile
    增加细节 配合去除景深,使用精确背景去除工具得到人物蒙版,回送脚本
    media_pipe face(脸部边缘检测)
    用于生成表情
    hed(边缘检测)
    用于ai动画生成
    canny(边缘检测)
    轮廓提示
    lineart(线稿提取)
    轮廓提示
    softedge(软边缘检测)
    轮廓提示
    depth
    场景远近提示
    9.SD插件目录推荐
    根据个人喜好推荐大家安装插件,首先阅读前文,确定插件和模型的区别,以及插件的安装目录,下面是插件名称以及作用目录安装目录/extentions
    1.2.1常用插件3D openpose
    1.基础菜单:
    文件:可根据文件生成[人物骨骼3D图],或者上传蒙版图片定位骨骼位置
    编辑:撤销/重做
    视图:锁定/释放
    设置:移动模式控制驱赶姿态移动,非移动控制角度
    反馈:忽略
    语言:设置为中文
    composable-lora
    LoRA修饰限制
    https://github.com/opparco/stable-diffusion-webui-composable-lora

controlnet
扩散控制网络
https://github.com/Mikubill/sd-webui-controlnet

cutoff
色彩分离
https://github.com/hnmr293/sd-webui-cutoff

images-browser
图库浏览器
https://github.com/AlUlkesh/stable-diffusion-webui-images-browser

locon
LyCORIS 兼容插件(LoCon/LoHa)
https://github.com/KohakuBlueleaf/a1111-sd-webui-locon

Multidiffusion
分块多重扩散
https://github.com/pkuliyi2015/multidiffusion-upscaler-for-automatic1111

tagcomplete
tag自动补全
https://github.com/DominikDoom/a1111-sd-webui-tagcomplete

two-shot/latent couple
画面分区(分支)
https://github.com/ashen-sensored/stable-diffusion-webui-two-shot

Civitai-Helper
C站助手
https://github.com/butaixianran/Stable-Diffusion-Webui-Civitai-Helper

kitchen-theme
Kitchen 主题
https://github.com/canisminor1990/sd-web-ui-kitchen-theme

two-shot/latent couple
画面分区
https://github.com/opparco/stable-diffusion-webui-two-shot

3d-open-pose-editor
3D OpenPose 编辑器
https://github.com/nonnonstop/sd-webui-3d-open-pose-editor

Config-Presets
预设配置
https://github.com/Zyin055/Config-Presets

depth-lib
深度图编辑插件
https://github.com/jexom/sd-webui-depth-lib

grid_add_image_number
图片序号标注插件
https://github.com/AlUlkesh/sd_grid_add_image_number.git

openpose-editor
OpenPose 编辑器
https://github.com/fkunn1326/openpose-editor

system-info
系统信息
https://github.com/vladmandic/sd-extension-system-info

additional-networks
可选附加网络(LoRA插件)
https://github.com/kohya-ss/sd-webui-additional-networks

aesthetic-scorer
美学评分插件
https://github.com/vladmandic/sd-extension-aesthetic-scorer

Local Latent upscaLer
局部细化
https://github.com/hnmr293/sd-webui-llul

merge-block-weighted
分块加权模型合并插件(MBW)
https://github.com/bbc-mc/sdweb-merge-block-weighted-gui.git

novelai-2-local-prompt
novelai 转 webui 括号
https://github.com/animerl/novelai-2-local-prompt

pixelization
像素化插件
https://github.com/AUTOMATIC1111/stable-diffusion-webui-pixelization

rembg
背景去除插件
https://github.com/AUTOMATIC1111/stable-diffusion-webui-rembg.git

tokenizer
词元分析器
https://github.com/AUTOMATIC1111/stable-diffusion-webui-tokenizer

vram-estimator
显存评估
https://github.com/space-nuko/a1111-stable-diffusion-webui-vram-estimator

wd14-tagger
Tag反推(Tagger)
https://github.com/toriato/stable-diffusion-webui-wd14-tagger

bilingual-localization
双语本地化插件
https://github.com/journey-ad/sd-webui-bilingual-localization

catppuccin
界面个性化设置
https://github.com/catppuccin/stable-diffusion-webui

gelbooru-prompt
Gelbooru标签自动摘录
https://github.com/antis0007/sd-webui-gelbooru-prompt

model-converter
模型格式转换
https://github.com/Akegarasu/sd-webui-model-converter

multiple-hypernetworks
多超网络加载
https://github.com/antis0007/sd-webui-multiple-hypernetworks

posex
3D OpenPose 编辑器(Posex)
https://github.com/hnmr293/posex

xyplus
X/Y图表 Plus 插件
https://github.com/bbc-mc/sdweb-xyplus

采样方法区别
10.0提示词教程
官网地址:https://github.com/PlexPt/awesome-chatgpt-prompts-zh
10.1.基础概念
如图所示,
绿色文字框为正向提示词,即文本需要出现的风格,人物,景观,主要元素
红色输入框为反向提示词,即文本中不需要出现的元素,即多手,多脚,劣质画质等等
2.提示词由主题人物,元素,背景,灯光,等多个维度构成,提示词对于prompt属于小维度,在prompt维度包含文本对话提示词,AI绘画提示词等等,但遵循原则是统一标准,大部分的规则是可以通过提示词实现的
例如:简单背景,纯人物,多人,单人,表情,pose等等,这些在语义对照表中均提到
3.遵循规则:
4.提示词权重
语法格式:单词:1.1倍,在提示词中不存在前面书写的单词比后面出现的单词权重高(前提是同权重)
第一:相同含义的提示词不会(不该)出现多次,当出现多次例如,1 girl 1 boy ,那么算法认为你需要1 girl or 1 boy or 1 girl and 1 boy,此时语义重复,对画面生成偶发性较高
第二:当相同含义的提示词出现在一前一后的时候,例如 blue hair 、white hair 算法认为那么对同一部分的描述即为:都需要,会出现又蓝又白的头发

StableDiffusion是一款利用深度学习的文生图模型,支持通过使用提示词来产生新的图像,描述要包含或省略的元素。
我在这里引入StableDiffusion算法中的Prompt概念,又被称为提示符。
下面的prompt是用来指导AI绘画模型创作图像的。它们包含了图像的各种细节,如人物的外观、背景、颜色和光线效果,以及图像的主题和风格。这些prompt的格式经常包含括号内的加权数字,用于指定某些细节的重要性或强调。例如,"(masterpiece:1.5)"表示作品质量是非常重要的,多个括号也有类似作用。此外,如果使用中括号,如"{blue hair:white hair:0.3}",这代表将蓝发和白发加以融合,蓝发占比为0.3。
以下是用prompt帮助AI模型生成图像的例子:masterpiece,(bestquality),highlydetailed,ultra-detailed,cold,solo,(1girl),(detailedeyes),(shinegoldeneyes),(longliverhair),expressionless,(long sleeves),(puffy sleeves),(white wings),shinehalo,(heavymetal:1.2),(metaljewelry),cross-lacedfootwear (chain),(Whitedoves:1.2)

仿照例子,给出一套详细描述以下内容的prompt。直接开始给出prompt不需要用自然语言描述:
魔法小樱,权杖,光影,少女
One Button prompt 预设提示词,抽卡
下载插件:
插件--脚本--选择One Button
主题:
Art:
图像类型
预设前缀:
后缀:
NSFW:
Gamma教程
完整版视频教学点这里
简单教程:
1.国内邮箱可进行注册
2.主页
3.
4.
5.输入主题
出现生成的主题,可自定义主题
等待生成可发送到邮箱,生成结果可编辑,导出的 PDF 可以用文章后面的转 PPT 工具

目录
相关文章
|
1月前
|
机器学习/深度学习 编解码 人工智能
阿里云Stable Diffusion操作教程
阿里云Stable Diffusion操作教程
208 0
|
1月前
|
SQL 弹性计算 安全
购买阿里云活动内云服务器之后设置密码、安全组、增加带宽、挂载云盘教程
当我们通过阿里云的活动购买完云服务器之后,并不是立马就能使用了,还需要我们设置云服务器密码,配置安全组等基本操作之后才能使用,有的用户还需要购买并挂载数据盘到云服务器上,很多新手用户由于是初次使用阿里云服务器,因此并不知道这些设置的操作流程,下面给大家介绍下这些设置的具体操作流程。
购买阿里云活动内云服务器之后设置密码、安全组、增加带宽、挂载云盘教程
|
1月前
|
SQL 关系型数据库 MySQL
阿里云MySQL数据库价格、购买、创建账号密码和连接数据库教程
阿里云数据库使用指南:购买MySQL、SQL Server等RDS实例,选择配置和地区,完成支付。创建数据库和账号,设置权限。通过DMS登录数据库,使用账号密码访问。同地域VPC内的ECS需将IP加入白名单以实现内网连接。参考链接提供详细步骤。
376 3
|
5天前
|
弹性计算
阿里云备案流程和操作步骤详解(图文教程)
以下是内容摘要: 本文指导了阿里云账号注册、实名认证及服务器购买流程,并详细阐述了域名注册与备案步骤。首先,需注册阿里云账号并完成个人或企业实名认证,然后选购服务器。接着,进行域名注册与实名认证。备案阶段,用户需在阿里云备案系统中填写相关信息,包括主体信息、网站信息,并上传相关证件照片。提交备案后,系统将进行审核,用户可通过阿里云ICP代备案平台查看进度。整个过程需确保联系方式畅通,以便接收审核通知。
|
27天前
|
弹性计算 关系型数据库 MySQL
阿里云数据库服务器价格表,数据库创建、连接和使用教程
阿里云数据库使用流程包括购买和管理。选择所需数据库类型如MySQL,完成实名认证后购买,配置CPU、内存和存储。确保数据库地域与ECS相同以允许内网连接。创建数据库和账号,设置权限。通过DMS登录数据库,使用账号密码连接。同一VPC内的ECS需添加至白名单以进行内网通信。参考官方文档进行详细操作。
129 3
|
1月前
|
SQL 关系型数据库 MySQL
阿里云数据库使用教程、购买、价格、连接数据库全流程
阿里云数据库使用涉及购买、创建及登录步骤。支持MySQL、SQL Server等引擎。购买时选择所需配置、地域和可用区。创建数据库和账号后,通过DMS登录。在同一地域内,ECS需将IP加入RDS白名单以实现内网连接。详细流程见阿里云官方文档。
|
1月前
|
弹性计算 关系型数据库 MySQL
阿里云MySQL云数据库优惠价格、购买和使用教程分享!
阿里云数据库使用流程包括购买和管理。首先,选购支持MySQL、SQL Server、PostgreSQL等的RDS实例,如选择2核2GB的MySQL,设定地域和可用区。购买后,等待实例创建。接着,创建数据库和账号,设置DB名称、字符集及账号权限。最后,通过DMS登录数据库,填写账号和密码。若ECS在同一地域和VPC内,可内网连接,记得将ECS IP加入白名单。
445 2
|
1月前
|
SQL 关系型数据库 MySQL
阿里云mysql数据库价格购买和使用教程
阿里云数据库使用指南:购买MySQL、SQL Server等RDS实例,通过选择配置、地域和可用区完成购买。创建数据库和账号,分配权限。使用DMS登录数据库,进行管理操作。确保ECS与RDS在同一地域的VPC内,配置白名单实现内网连接。详细步骤见官方文档。
633 1
|
1月前
|
存储 弹性计算 数据库
阿里云优惠券是什么?2024年阿里云优惠券领取地址及使用教程汇总
阿里云作为国内领先的云计算服务提供商,为广大用户提供了丰富的云产品和解决方案。为了吸引用户上云,阿里云经常推出各种优惠活动,其中最受用户欢迎的就是阿里云优惠券。那么,阿里云优惠券究竟是什么呢?我们又该如何领取它呢?本文将为大家详细解答。
245 2
|
1月前
|
Ubuntu JavaScript 关系型数据库
在阿里云Ubuntu 20.04服务器中搭建一个 Ghost 博客
在阿里云Ubuntu 20.04服务器上部署Ghost博客的步骤包括创建新用户、安装Nginx、MySQL和Node.js 18.x。首先,通过`adduser`命令创建非root用户,然后安装Nginx和MySQL。接着,设置Node.js环境,下载Nodesource GPG密钥并安装Node.js 18.x。之后,使用`npm`安装Ghost-CLI,创建Ghost安装目录并进行安装。配置过程中需提供博客URL、数据库连接信息等。最后,测试访问前台首页和后台管理页面。确保DNS设置正确,并根据提示完成Ghost博客的配置。
在阿里云Ubuntu 20.04服务器中搭建一个 Ghost 博客