【收藏】Stable Diffusion 制作光影文字效果

本文涉及的产品
Serverless 应用引擎 SAE,800核*时 1600GiB*时
可观测可视化 Grafana 版,10个用户账号 1个月
EMR Serverless StarRocks,5000CU*H 48000GB*H
简介: 本文将详细讲解基于函数计算部署 Stable Diffusion 实现光影文字效果。

image.png

image.png

大家对于最近 Stable Diffusion 不断出新的视觉“整活”印象都很深刻,很多人对最近比较流行的制作光影文字很感兴趣,制作光影文字可以作为进阶 Stable Diffusion 的必备一课,本文将详细讲解基于函数计算部署Stable Diffusion  实现光影文字效果,观看文章需要5分钟,看完即会赶紧尝试!

资源准备

部署云端 Stable Diffusion

  1. 选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create

image.png

2.进行基础配置

直接部署 —》首次开通函数计算配置提示的“角色名称”—》确认 FC和NAS已经开通

image.png

3.进行高级配置

选择地域—》绘图类型任选1个—》首次部署需要RAM角色 APN授权

其他地方如无特殊要求可以直接默认

image.png


  1. 创建并部署默认环境

确认知晓使用SD过程中产生的函数计算和 NAS 费用(计费项超出试用额度后直接转为按量付费)

image.png

  1. 部署成功

两个地址解释如下:

  • 第一个以sd开头的是 Stable Diffusion webui访问域名,您可以直接打开使用内置的 SD1.5\动漫风格 \真人风格 模型
  • 第二个以 admin 开头的链接则是您的模型文件以及插件文件的管理后台,我们需要先访问这个后台进行模型的上传。

image.png

  1. 访问admin开头的域名,进入模型管理平台

image.png

准备大模型

您可以直接在模型库中下载 majicMix realistic模型,模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。

模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。

image.png

准备 Controlnet

ControlNet 包含插件和模型两部分。为了降低费用消耗,建议先下载到本地后,通过 admin 上传至 NAS。

  1. ControlNet 插件地址,进入页面后,点击右侧绿色的 Code 按钮,并选择 Download ZIP 下载插件代码

项目地址:https://github.com/Mikubill/sd-webui-controlnet

image.png

  1. 下载完成后,通过管理工具上传您的下载的 zip 包

image.png

  1. 刷新下当前目录内容,并将 controlnet 解压到当前目录。

image.png

  1. 等待解压完成后会自动刷新,此时可以看到解压好的目录

image.png

  1. 进入目录后,将其中的内容剪切或复制至上一层

image.png

  1. 在上一层目录粘贴

image.png

  1. 最终形式如下(此时可以删掉刚才上传的 zip 包以及随机名称的文件夹)

image.png

  1. 回到 Stable Diffusion,重新加载 WebUI,而后刷新页面

image.png

  1. 确保扩展插件目录已存在 sd-webui-controlnet,应用并重启用户页面

image.png

  1. 此时可以看到您的页面上已经有了 ControlNet 配置项

image.png

  1. 接下来需要下载 SD 需要的模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness

image.png

  1. 上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

image.png

以上步骤如果遇到任何问题可以查看详细文档

https://developer.aliyun.com/adc/scenario/exp/b2cc0e1c3a6244e0bd9fc0f37acd5a0e?

制作光影文字

  1. 准备文字图,您可以使用 PPT 或者PS制作黑底白字的图(字要大)

image.png

  1. 添加提示词设置采样步数,以城市夜景为例

正向提示词:chengshi,city,Building,tall building,Neon Light

反向提示词:EasyNegative,(worst quality:2),(low quality:2),(normal quality:2),lowres

过多采样步数会导致文字不清晰,我设置 20,您可以自行调节

  1. 文字图放入 ControlNet

启用—All—预处理:None——模型:brightness

以下参数经过测试,您可以根据需要自行调节

Control Weight: 0.4左右

Starting Control Step:0~0.2

Endting Control Step: 0.5~0.7

image.png

image.png

image.png

常见费用问题

Q1:为什么我领取了试用额度,依然有函数计算小额计费?

Stable Diffusion 使用“公网出流量”,而试用额度不支持抵扣公网出流量的费用。如您未购买相关资源包,公网出流量使用量将计入按量付费。参考如下:

如果您生成100张图。

公网出流量:5MB/每张图 * 100张图 = 500MB, 0.25元(0.50元/GB)

说明:预估费用仅供参考,实际费用取决于图片大小、调用频率等多种因素,如需长期使用本服务,请仔细阅读函数计算(FC)资源使用费用,避免产生意料之外的费用;如仅为体验功能不做长期使用,请一定按照文档最后删除步骤,部署之后立即删除。

Q2:为什么我领取了 NAS 50G 3个月额度,存了几个模型后发现有付费?

您上传的模型会存储在阿里云文件存储 NAS上 ,NAS 通用型的实例规格分为性能型和容量型,您领取的NAS免费额度可以抵扣容量型实例50G的存储 或者性能型实例子9.15G的,本实验使用性能型NAS,因此您的NAS免费额度为性能型9.15G ,超出此存储大小之后,NAS一定会收取您的费用。性能型实例超出免费额度后后每个GB 每个月收取您1.8元

假如小明0元购买了文件存储 NAS 资源包,可上传多少个基础大模型或lora模型呢?

文件存储NAS提供通用型NAS资源包50 GiB ,使用期限3个月。本实验使用性能型NAS,性能型NAS 5.47 50 GiB通用型基准容量能抵扣50 ÷ 5.47 = 9.15 GiB 性能型NAS使用量。

假如基础大模型3.97G,Lora 模型400MB,那么小明使用免费额度可以存储2个大模型,3个Lora模型。

请您注意账单,必要时可以选择删除NAS实例。


利用函数计算一键部署 AIGC 应用

将会通过以下5个实验场景进行学习👇👇👇~让你也能成为优秀的创作家!

1、【文生图】一键部署Stable Diffusion基于函数计算
2、【文生文】一键部署通义千问预体验
3、【图生图】一键部署3D卡通风格模型
4、【图生文】一键部署图像描述模型
5、【文生文】一键部署ChatYuan模型
6、【文生图】可换模型,函数计算一键部署 Stable Diffusion


立即体验

https://developer.aliyun.com/adc/scenarioSeries/05ea15a105714deeb3e334c385a26556

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
10月前
|
人工智能 自然语言处理 前端开发
AI 绘画Stable Diffusion 研究(十)sd图生图功能详解-精美二维码的制作
AI 绘画Stable Diffusion 研究(十)sd图生图功能详解-精美二维码的制作
749 1
Stable Diffusion生成艺术二维码
Stable Diffusion生成艺术二维码
406 0
|
2月前
|
前端开发 异构计算 API
探索Stable Diffusion:从零开始的代码接入创意图像生成指南
探索Stable Diffusion,了解这一图像生成技术,适用于创意设计、内容生成和前端应用。本文从基本概念到实战,教你如何用Python和相关库搭建环境,通过GPU加速,生成基于文本提示的图像。学习多样性和风格融合技巧,解决实践中遇到的问题,如内存溢出和图像模糊。前端开发者可将模型部署为API,实现实时动态图像生成,提升用户体验。一起发掘Stable Diffusion在艺术和设计领域的无限潜力!
158 2
|
3月前
|
搜索推荐
Stable Diffusion 人物发型提示词大全,中英文列表!
使用发型提示词能更精确描述所需图像的发型特征,如卷发、短发、颜色和风格。结合正负提示词,确保生成图片符合预期。尝试使用工具如[PromptChoose](https://promptchoose.com/)来创建个性化图像描述,包含多种发型选项,如刘海、马尾、波浪发型等,以增强图像细节和个性化。负面提示词防止不合适内容。利用提示词工具可提高生成图片的准确性和满足度。
|
11月前
|
存储 人工智能 Serverless
【收藏】制作艺术二维码,用 Stable Diffusion 就行!
艺术永远都不至于一种方式,基于函数计算部署 Stable Diffusion 制作艺术二维码,把你的艺术作品藏在二维码里面!
|
3月前
|
机器学习/深度学习 算法 安全
Stable Diffusion使用窍门
Stable Diffusion使用窍门
456 1
|
10月前
|
人工智能 物联网
AI 绘画Stable Diffusion 研究(十一)sd图生图功能详解-美女换装
AI 绘画Stable Diffusion 研究(十一)sd图生图功能详解-美女换装
952 1
|
12月前
|
存储 人工智能 Serverless
玩转 ControlNet:Stable Diffusion 制作光影文字效果
基于函数计算部署Stable Diffusion, 制作光影文字可以作为进阶 Stable Diffusion 的必备一课
1507 3
|
10月前
|
人工智能
AI 绘画Stable Diffusion 研究(十四)SD 图生图+剪映制作人物说话视频(2)
AI 绘画Stable Diffusion 研究(十四)SD 图生图+剪映制作人物说话视频
533 0
|
10月前
|
人工智能
AI 绘画Stable Diffusion 研究(十四)SD 图生图+剪映制作人物说话视频(1)
AI 绘画Stable Diffusion 研究(十四)SD 图生图+剪映制作人物说话视频
479 0