【AI绘画】ControlNet 之 Reference only 锁定面部跑图

简介: 【AI绘画】ControlNet 之 Reference only 锁定面部跑图

一、Reference only 预处理器介绍


Reference only,意思就是仅供参考。能解决的问题就是我前几天对于Stable Diffusion 的疑惑之一:不知 AI 生成的角色,如何固定脸型等能彰显角色的特征,生成动作差异性比较大的图片?




二、Reference only 的用法


给一张参考图,和一些提示词,就可以生成一些类似的图片,这些图片跟参考图的内容尽量是保持一致的,比如说它的环境、色彩、画风、构图等,当然了最重要的是脸型。说白了就是:画同一个人,但是有一定的变化




三、更新 ControlNet(官方明确表示使用reference only 需要ControlNet的版本在1.1.153以上)



  1. 点击【扩展】

    26608654-d066fba776c5027a.png
  2. 点击【已安装】

    26608654-2429e72b7e2b0bfa.png
  3. 点击【检查更新】

    26608654-cece13747d2f0bde.png

26608654-595f3c3e14e4541e.png

  • 可以看到更新进度条

26608654-99b74fff23b00f21.png

  • 更新完之后,可以看到很多插件都是“最新”了,ControlNet有个 new commit
  1. 点击【应用并重启用户界面】
  2. 再次点击【扩展】

    26608654-19c23f5b97816d85.png
  • 可以看到都是【最新】了
  1. 再次查看 ControlNet 版本

    26608654-9cb013a542c122bc.png
  • 可以看到现在 ControlNet 已经是 1.1.173 版本了,完全符合使用 reference only 的版本了。





四、使用 reference only


  1. 上传图片并配置参数


26608654-bfb345e979a420e5.png


  1. 编辑提示词
    26608654-d470963c386e338a.png

    提示词:(((masterpiece))), (((high quality))), 1girl, upper body, protagonist, seaside, scenery, beach, terrain, texture, color, starry sky, sky, night, romantic, smile
  2. 跑图开始

    26608654-31ea343d39c96d87.png

    点击生成,可以看到,生成了4张(图片的张数可以由【生成批次】配置)动作,背景,视角略有不同的图片,但基本可以确定是同一个角色。

再绘几张不同表情的图:


image.png




尾声

又是愉快的学习 AI  绘画的一天!!!


SD 的功能非常强大,七镜现在也还在学习阶段,有一起玩 AI 绘画的朋友,可以联系七镜,跟七镜一同成长。




目录
相关文章
|
6月前
|
人工智能 Windows Python
Windows下体验Stable Diffusion 近距离感受AI魔法绘画
Windows下体验Stable Diffusion 近距离感受AI魔法绘画
137 2
|
1月前
|
人工智能 开发者
FacePoke:AI时代的面部表情编辑新体验
**FacePoke** 是一款引人注目的开源工具,利用先进的人工智能技术,让用户通过简单的拖拽界面实时编辑面部表情。它支持实时编辑与动画,提供直观的操作体验,适用于艺术项目、视频制作和社交内容等多种场景。FacePoke 的开源特性还允许开发者自由修改和扩展功能。无论是艺术家还是内容创作者,都能轻松提升数字内容的情感表达。
|
2月前
|
人工智能 计算机视觉 Python
AI计算机视觉笔记八:基于mediapipe的虚拟绘画
该项目利用MediaPipe手部关键点识别技术,实现了隔空绘画功能。用户可以通过手势控制绘画工具,选择颜色或橡皮擦。环境配置基于`mediapipe_env`,在PyCharm中运行。项目包括两个文件:`AiVirtualPainter.py`负责绘画逻辑,`HandTrackingModule.py`用于手部关键点检测。此项目展示了AI技术在互动应用中的潜力,适合初学者实践与学习。
66 10
|
4月前
|
机器学习/深度学习 人工智能 算法
解决方案评测:通义万相 AI 绘画创作
通义万相 AI 绘画创作工具在功能、使用体验等方面表现出色,为用户提供了一种便捷、高效的绘画创作方式。虽然存在一些不足之处,但随着技术的不断发展和优化,相信其性能和表现会不断提升。对于艺术家、设计师、创意工作者以及普通爱好者来说,通义万相都是一款值得尝试和探索的 AI 绘画工具。
382 4
解决方案评测:通义万相 AI 绘画创作
|
4月前
|
人工智能 弹性计算 自然语言处理
通义万相AI创作绘画产品方案产品体验
本次我有幸接触并体验了阿里云通义万相这一创新的AI绘画工具方案。该方案它是在利用人工智能技术,为用户提供创新、便捷的绘画创作体验。在体验过程中,我主要关注了产品的易用性、功能性、创新性、用户体验及方案本身等方面。
168 3
|
4月前
|
弹性计算 人工智能 对象存储
来自通义万相的创意加速器:AI 绘画创作
【7月更文挑战第11天】来自通义万相的创意加速器:AI 绘画创作
|
5月前
|
人工智能 Python Shell
CodeFormer——AI驱动的面部图像修复与增强
CodeFormer是由南洋理工大学和商汤科技联合研发的AI人脸复原模型,结合VQGAN和Transformer技术,能从模糊或马赛克图像中生成清晰图像。它具备老照片修复、黑白照片彩色化、马赛克修复和低码率视频增强等功能。安装过程涉及miniconda3、Python环境配置、相关库的安装及模型训练数据下载。在测试视频增强时,虽然初期遇到ffmpeg导入问题,但通过安装ffmpeg-python得以解决,不过CPU占用率高。此外,还展示了对图片进行增强的命令行操作及结果示例。
|
5月前
|
人工智能 算法
AIGC创作活动 | 智"绘"AI,使用PAI创造风格百变绘画助手
使用阿里云人工智能平台PAIx Free Prompt Editing图像编辑算法,开发个人AIGC绘图小助理,实现文本驱动的图像编辑功能单卡即可完成AIGC图片风格变化、背景变化和主体变化等功能。让我们一同开启这场旅程,为您的图像编辑添上无限可能性的翅膀吧。
|
6月前
|
机器学习/深度学习 人工智能 TensorFlow
Python AI 绘画
Python AI 绘画
141 1
|
5月前
|
人工智能 开发工具 git
Python AI 绘画
Python AI 绘画