玩转 ControlNet:Stable Diffusion 制作光影文字效果

本文涉及的产品
Serverless 应用引擎 SAE,800核*时 1600GiB*时
函数计算FC,每月15万CU 3个月
简介: 基于函数计算部署Stable Diffusion, 制作光影文字可以作为进阶 Stable Diffusion 的必备一课

image.png

image.png

大家对于最近 Stable Diffusion 不断出新的视觉“整活”印象都很深刻,很多人对最近比较流行的制作光影文字很感兴趣,制作光影文字可以作为进阶 Stable Diffusion 的必备一课,本文将详细讲解基于函数计算部署Stable Diffusion  实现光影文字效果,观看文章需要5分钟,看完即会赶紧尝试!


资源准备


部署云端 Stable Diffusion

1.选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create

image.png

2.创建 Stable Diffusion 需要开通函数计算FC和文件存储NAS,新用户一定领取试用额度

image.png

3.创建 Stable Diffusion WebUI

选择地域 —》选择“绘图类型”(后续可自己换)—》首次部署需要RAM角色 APN授权

其他地方如无特殊要求可以直接默认

image.png

4.确认知晓使用SD过程中产生的函数计算费用及重要提醒,等待Stable Diffusion WebUI部署成功

image.png

5.更换及管理模型需要进行“初始化模型管理”,注意存储模型开始用到文件存储 NAS产品

image.png

6.确认了解使用NAS的费用和注意事项,确认开始创建模型管理工具——选择“自动配置”——确认

image.png

7.访问admin开头的域名,进入模型管理平台

image.png

准备大模型

您可以选择喜欢的模型用以生成二维码的风格,本教程推荐模型库中下载 majicMix realistic模型,模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。


模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。

image.png


准备光影文字需要的模型

部署的Stable Diffusion 已经内置了 Controlnet 和常用ControlNet 插件。

本教程仅仅需要下载需要的 ControlNet 插件即可。


1.下载制作光影文字需要的模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness

image.png

6.上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

image.png

以上步骤如果遇到任何问题可以查看详细文档

https://developer.aliyun.com/adc/scenario/b2cc0e1c3a6244e0bd9fc0f37acd5a0e


制作光影文字

1.准备文字图,您可以使用 PPT 或者PS制作黑底白字的图(字要大)

image.png

2.添加提示词设置采样步数,以城市夜景为例

正向提示词:chengshi,city,Building,tall building,Neon Light

反向提示词:EasyNegative,(worst quality:2),(low quality:2),(normal quality:2),lowres

过多采样步数会导致文字不清晰,我设置 20,您可以自行调节

3.文字图放入 ControlNet

启用—All—预处理:None——模型:brightness

以下参数经过测试,您可以根据需要自行调节

Control Weight: 0.4左右

Starting Control Step:0~0.2

Endting Control Step: 0.5~0.7

image.png


image.png

  1. image.png



“阿里云 X 森马 AIGC T恤设计大赛“邀你参加


阿里云携手国民服装品牌森马推出 AIGC T 恤设计大赛,无论您是开发者、设计师、还是AI绘画爱好者,都可以使用阿里云函数计算快速部署 Stable Diffusion,以“宇宙漫游”为主题,进行AI 创作并投递作品即可参赛。所有作品均有机会被森马选中并购买版权成为下一季服装图案主题。


立即参赛:https://developer.aliyun.com/adc/series/activity/aigc_design

可获得奖品: Apple Airpods、作品定制阿里云X森马联名T恤、森马定制旅行箱、森马无门槛代金券等丰厚奖励

活动时间:2023年8月21日-2023年9月21日

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
目录
相关文章
Stable Diffusion生成艺术二维码
Stable Diffusion生成艺术二维码
434 0
|
3月前
|
前端开发 异构计算 API
探索Stable Diffusion:从零开始的代码接入创意图像生成指南
探索Stable Diffusion,了解这一图像生成技术,适用于创意设计、内容生成和前端应用。本文从基本概念到实战,教你如何用Python和相关库搭建环境,通过GPU加速,生成基于文本提示的图像。学习多样性和风格融合技巧,解决实践中遇到的问题,如内存溢出和图像模糊。前端开发者可将模型部署为API,实现实时动态图像生成,提升用户体验。一起发掘Stable Diffusion在艺术和设计领域的无限潜力!
223 2
|
4月前
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(二)
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(二)
212 4
|
4月前
|
编解码 人工智能 自然语言处理
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(一)
Stable Diffusion文生图-图生图-ControINet插件-线稿上色-生产全套表情包-3D Openpose-局部重绘-换衣服,换姿势人设三视图一键生成教程大全(一)
370 1
|
4月前
|
传感器 自动驾驶 机器人
【Stable Diffusion】通过ControlNet修复手臂
【Stable Diffusion】通过ControlNet修复手臂
87 0
|
4月前
|
机器学习/深度学习 算法 安全
Stable Diffusion使用窍门
Stable Diffusion使用窍门
482 1
|
人工智能 文件存储 对象存储
Stable Diffusion 模型库,AIGC 画风任你选
Stable Diffusion(简称 SD)模型库包含写实、国漫、科技等几十种风格。可以让用户一键转存到自己的存储空间,而后直接挂载到 PAl 或 FC 下进行推理和训练。无需复杂漫长的下载和上传步骤,即可获得多种模型的使用体验,实现云上 AIGC 的快速搭建。
51628 22
Stable Diffusion 模型库,AIGC 画风任你选
|
11月前
|
人工智能 物联网 机器人
还在用Lora模型?快来试试 Stable Diffusion SDXL 1.0 模型,实现绘画自由
基于阿里云PAI-DSW部署Stable Diffusion SDXL 1.0 模型,生成高质量图片
455 0
|
人工智能 算法
MidJourney v5.2 、Stable Diffusion XL 0.9 出图对比
最近两个最流行的AI图像生成器,Midjourney和Stable Diffusion,都发布了重大更新。Midjourney v5.2引入了许多新功能,包括“缩小”功能、“/缩短”命令、改进的图像质量等。
282 1
|
存储 人工智能 Serverless
玩转 ControlNet:Stable Diffusion 制作艺术二维码
本文将详细讲解基于函数计算部署 Stable Diffusion 做一个艺术二维码,
1119 0