【收藏】Stable Diffusion 制作光影文字效果

本文涉及的产品
容器镜像服务 ACR,镜像仓库100个 不限时长
应用实时监控服务-可观测链路OpenTelemetry版,每月50GB免费额度
注册配置 MSE Nacos/ZooKeeper,118元/月
简介: 本文将详细讲解基于函数计算部署 Stable Diffusion 实现光影文字效果。

image.png

image.png

大家对于最近 Stable Diffusion 不断出新的视觉“整活”印象都很深刻,很多人对最近比较流行的制作光影文字很感兴趣,制作光影文字可以作为进阶 Stable Diffusion 的必备一课,本文将详细讲解基于函数计算部署Stable Diffusion  实现光影文字效果,观看文章需要5分钟,看完即会赶紧尝试!

资源准备

部署云端 Stable Diffusion

  1. 选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create

image.png

2.进行基础配置

直接部署 —》首次开通函数计算配置提示的“角色名称”—》确认 FC和NAS已经开通

image.png

3.进行高级配置

选择地域—》绘图类型任选1个—》首次部署需要RAM角色 APN授权

其他地方如无特殊要求可以直接默认

image.png


  1. 创建并部署默认环境

确认知晓使用SD过程中产生的函数计算和 NAS 费用(计费项超出试用额度后直接转为按量付费)

image.png

  1. 部署成功

两个地址解释如下:

  • 第一个以sd开头的是 Stable Diffusion webui访问域名,您可以直接打开使用内置的 SD1.5\动漫风格 \真人风格 模型
  • 第二个以 admin 开头的链接则是您的模型文件以及插件文件的管理后台,我们需要先访问这个后台进行模型的上传。

image.png

  1. 访问admin开头的域名,进入模型管理平台

image.png

准备大模型

您可以直接在模型库中下载 majicMix realistic模型,模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。

模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。

image.png

准备 Controlnet

ControlNet 包含插件和模型两部分。为了降低费用消耗,建议先下载到本地后,通过 admin 上传至 NAS。

  1. ControlNet 插件地址,进入页面后,点击右侧绿色的 Code 按钮,并选择 Download ZIP 下载插件代码

项目地址:https://github.com/Mikubill/sd-webui-controlnet

image.png

  1. 下载完成后,通过管理工具上传您的下载的 zip 包

image.png

  1. 刷新下当前目录内容,并将 controlnet 解压到当前目录。

image.png

  1. 等待解压完成后会自动刷新,此时可以看到解压好的目录

image.png

  1. 进入目录后,将其中的内容剪切或复制至上一层

image.png

  1. 在上一层目录粘贴

image.png

  1. 最终形式如下(此时可以删掉刚才上传的 zip 包以及随机名称的文件夹)

image.png

  1. 回到 Stable Diffusion,重新加载 WebUI,而后刷新页面

image.png

  1. 确保扩展插件目录已存在 sd-webui-controlnet,应用并重启用户页面

image.png

  1. 此时可以看到您的页面上已经有了 ControlNet 配置项

image.png

  1. 接下来需要下载 SD 需要的模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness

image.png

  1. 上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

image.png

以上步骤如果遇到任何问题可以查看详细文档

https://developer.aliyun.com/adc/scenario/exp/b2cc0e1c3a6244e0bd9fc0f37acd5a0e?

制作光影文字

  1. 准备文字图,您可以使用 PPT 或者PS制作黑底白字的图(字要大)

image.png

  1. 添加提示词设置采样步数,以城市夜景为例

正向提示词:chengshi,city,Building,tall building,Neon Light

反向提示词:EasyNegative,(worst quality:2),(low quality:2),(normal quality:2),lowres

过多采样步数会导致文字不清晰,我设置 20,您可以自行调节

  1. 文字图放入 ControlNet

启用—All—预处理:None——模型:brightness

以下参数经过测试,您可以根据需要自行调节

Control Weight: 0.4左右

Starting Control Step:0~0.2

Endting Control Step: 0.5~0.7

image.png

image.png

image.png

常见费用问题

Q1:为什么我领取了试用额度,依然有函数计算小额计费?

Stable Diffusion 使用“公网出流量”,而试用额度不支持抵扣公网出流量的费用。如您未购买相关资源包,公网出流量使用量将计入按量付费。参考如下:

如果您生成100张图。

公网出流量:5MB/每张图 * 100张图 = 500MB, 0.25元(0.50元/GB)

说明:预估费用仅供参考,实际费用取决于图片大小、调用频率等多种因素,如需长期使用本服务,请仔细阅读函数计算(FC)资源使用费用,避免产生意料之外的费用;如仅为体验功能不做长期使用,请一定按照文档最后删除步骤,部署之后立即删除。

Q2:为什么我领取了 NAS 50G 3个月额度,存了几个模型后发现有付费?

您上传的模型会存储在阿里云文件存储 NAS上 ,NAS 通用型的实例规格分为性能型和容量型,您领取的NAS免费额度可以抵扣容量型实例50G的存储 或者性能型实例子9.15G的,本实验使用性能型NAS,因此您的NAS免费额度为性能型9.15G ,超出此存储大小之后,NAS一定会收取您的费用。性能型实例超出免费额度后后每个GB 每个月收取您1.8元

假如小明0元购买了文件存储 NAS 资源包,可上传多少个基础大模型或lora模型呢?

文件存储NAS提供通用型NAS资源包50 GiB ,使用期限3个月。本实验使用性能型NAS,性能型NAS 5.47 50 GiB通用型基准容量能抵扣50 ÷ 5.47 = 9.15 GiB 性能型NAS使用量。

假如基础大模型3.97G,Lora 模型400MB,那么小明使用免费额度可以存储2个大模型,3个Lora模型。

请您注意账单,必要时可以选择删除NAS实例。


利用函数计算一键部署 AIGC 应用

将会通过以下5个实验场景进行学习👇👇👇~让你也能成为优秀的创作家!

1、【文生图】一键部署Stable Diffusion基于函数计算
2、【文生文】一键部署通义千问预体验
3、【图生图】一键部署3D卡通风格模型
4、【图生文】一键部署图像描述模型
5、【文生文】一键部署ChatYuan模型
6、【文生图】可换模型,函数计算一键部署 Stable Diffusion


立即体验

https://developer.aliyun.com/adc/scenarioSeries/05ea15a105714deeb3e334c385a26556

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
人工智能 自然语言处理 前端开发
AI 绘画Stable Diffusion 研究(十)sd图生图功能详解-精美二维码的制作
AI 绘画Stable Diffusion 研究(十)sd图生图功能详解-精美二维码的制作
872 1
Stable Diffusion生成艺术二维码
Stable Diffusion生成艺术二维码
481 0
|
自然语言处理
我用Stable diffusion复活了一个动漫女孩lofi girl
通过Stable diffusion的img2img功能,借助control net 把动漫人物还原成真实人物 使用到的技术Stable diffusion web ui、control net、img2img以及prompt进行微调
1368 0
|
8月前
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(二)
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(二)
298 4
|
8月前
|
编解码 人工智能 自然语言处理
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(一)
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(一)
573 1
|
存储 人工智能 Serverless
【收藏】制作艺术二维码,用 Stable Diffusion 就行!
艺术永远都不至于一种方式,基于函数计算部署 Stable Diffusion 制作艺术二维码,把你的艺术作品藏在二维码里面!
|
8月前
|
传感器 自动驾驶 机器人
【Stable Diffusion】通过ControlNet修复手臂
【Stable Diffusion】通过ControlNet修复手臂
109 0
|
人工智能 物联网
AI 绘画Stable Diffusion 研究(十一)sd图生图功能详解-美女换装
AI 绘画Stable Diffusion 研究(十一)sd图生图功能详解-美女换装
1129 1
|
存储 人工智能 Serverless
玩转 ControlNet:Stable Diffusion 制作光影文字效果
基于函数计算部署Stable Diffusion, 制作光影文字可以作为进阶 Stable Diffusion 的必备一课
1633 3
|
人工智能 算法
MidJourney v5.2 、Stable Diffusion XL 0.9 出图对比
最近两个最流行的AI图像生成器,Midjourney和Stable Diffusion,都发布了重大更新。Midjourney v5.2引入了许多新功能,包括“缩小”功能、“/缩短”命令、改进的图像质量等。
313 1