【AI绘画】ControlNet 之 Reference only 锁定面部跑图

简介: 【AI绘画】ControlNet 之 Reference only 锁定面部跑图

一、Reference only 预处理器介绍


Reference only,意思就是仅供参考。能解决的问题就是我前几天对于Stable Diffusion 的疑惑之一:不知 AI 生成的角色,如何固定脸型等能彰显角色的特征,生成动作差异性比较大的图片?




二、Reference only 的用法


给一张参考图,和一些提示词,就可以生成一些类似的图片,这些图片跟参考图的内容尽量是保持一致的,比如说它的环境、色彩、画风、构图等,当然了最重要的是脸型。说白了就是:画同一个人,但是有一定的变化




三、更新 ControlNet(官方明确表示使用reference only 需要ControlNet的版本在1.1.153以上)



  1. 点击【扩展】

    26608654-d066fba776c5027a.png
  2. 点击【已安装】

    26608654-2429e72b7e2b0bfa.png
  3. 点击【检查更新】

    26608654-cece13747d2f0bde.png

26608654-595f3c3e14e4541e.png

  • 可以看到更新进度条

26608654-99b74fff23b00f21.png

  • 更新完之后,可以看到很多插件都是“最新”了,ControlNet有个 new commit
  1. 点击【应用并重启用户界面】
  2. 再次点击【扩展】

    26608654-19c23f5b97816d85.png
  • 可以看到都是【最新】了
  1. 再次查看 ControlNet 版本

    26608654-9cb013a542c122bc.png
  • 可以看到现在 ControlNet 已经是 1.1.173 版本了,完全符合使用 reference only 的版本了。





四、使用 reference only


  1. 上传图片并配置参数


26608654-bfb345e979a420e5.png


  1. 编辑提示词
    26608654-d470963c386e338a.png

    提示词:(((masterpiece))), (((high quality))), 1girl, upper body, protagonist, seaside, scenery, beach, terrain, texture, color, starry sky, sky, night, romantic, smile
  2. 跑图开始

    26608654-31ea343d39c96d87.png

    点击生成,可以看到,生成了4张(图片的张数可以由【生成批次】配置)动作,背景,视角略有不同的图片,但基本可以确定是同一个角色。

再绘几张不同表情的图:


image.png




尾声

又是愉快的学习 AI  绘画的一天!!!


SD 的功能非常强大,七镜现在也还在学习阶段,有一起玩 AI 绘画的朋友,可以联系七镜,跟七镜一同成长。




目录
相关文章
|
2月前
|
人工智能 编解码 芯片
【AI绘画】你有多久没有打开SD了?
曾几何时,Stable Diffusion的复杂参数令人崩溃,如今即梦、可灵等AI工具已让生成图片变得轻而易举。哩布哩布发布2.0升级公告,看似迈向更易用的未来,却也悄然为那个钻研模型、拼接工作流的“拓荒时代”奏响终章。技术迭代飞快,但那份对创造的热爱与探索精神,永不褪色。
683 9
|
机器学习/深度学习 人工智能 自然语言处理
Sketch2Lineart:AI绘画工具,自动将手绘草图转换成清晰的线条画
Sketch2Lineart是一款基于人工智能的绘画工具,能够自动将手绘草图转换成清晰的线条画。该工具支持多种功能,如草图转线稿、自动描述生成、细节调整和风格定制等,适用于艺术创作、产品设计、教育培训等多个领域。
1108 60
Sketch2Lineart:AI绘画工具,自动将手绘草图转换成清晰的线条画
|
9月前
|
机器学习/深度学习 人工智能 安全
Stable Diffusion 3.0 :一键开启你的AI绘画之旅
本文介绍了Stable Diffusion 3.0的主要优化,包括采用DiT架构提升多对象生成能力及“流匹配”技术加速采样。同时解决了部署复杂、显卡需求高等问题,可通过阿里云计算巢一键部署,实现即开即用。文章展示了人像、动漫风、科幻风等生成效果,并提供中文菜单设置与插件下载教程。无论是专业设计师还是普通用户,都能轻松开启智能创作新时代。 Flux模型支持即将上线,值得期待。
|
11月前
|
人工智能 数据安全/隐私保护 图形学
关于AI绘画优雅草央千澈整理的一份咒语(与AI对话提示词-应用于AI绘图和AI生成视频)-本文长期更新-本次更新2025年1月15日更新-长期更新建议点赞收藏
关于AI绘画优雅草央千澈整理的一份咒语(与AI对话提示词-应用于AI绘图和AI生成视频)-本文长期更新-本次更新2025年1月15日更新-长期更新建议点赞收藏
716 4
|
10月前
|
机器学习/深度学习 人工智能 前端开发
FacePoke:开源AI实时面部编辑神器!拖拽调整表情/头部朝向,4K画质一键生成
FacePoke是一款基于AI技术的开源实时面部编辑工具,支持通过拖拽操作调整头部朝向和面部表情,适用于多种场景。
706 0
|
11月前
|
人工智能 弹性计算 自然语言处理
云端问道 6 期实践教学-创意加速器:AI 绘画创作
本文介绍了在阿里云平台上一键部署Demo应用的步骤。部署完成后,通过公网地址体验Demo应用,包括文本生成图像等功能。
280 10
|
11月前
|
存储 人工智能 弹性计算
云端问道6期方案教学-创意加速器:AI 绘画创作
本文整理自绍懿老师在云端问道第6期关于“创意加速器:AI绘画创作”的分享,主要介绍阿里云通义万相大模型的应用。内容涵盖七大部分:有趣的应用场景、通义万相简介、使用方法、优势特点、典型案例(如电商和营销场景)、收费标准及实操部署。通过这些内容,用户可以快速了解如何利用通义万相实现文字生成图片、图像编辑等功能,并应用于实际业务中,提升效率与创造力。
279 1
|
12月前
|
人工智能 程序员 Linux
神秘山洞惊现AI绘画至宝Stable Diffusion残卷
随着AI神器的现世,不少修士担忧其会取代人类职业。然而,自女娲创造人类以来,法宝虽强,始终只是辅助工具,需修士操控才能发挥威力。如今修仙界最大的至宝是GPT,它能以文字为引,转化出所需答案。图片处理方面也有Stable Diffusion、DALL-E等法宝。这些AI工具并非替代修士,而是提升效率的助手。例如,Stable Diffusion最初由慕尼黑和海德堡大学宗师炼制,现已发展多个版本,如v1、v2.0、SDXL等,帮助修士更便捷地生成图像。通过合理使用这些工具,修士们可以更好地实现心中所想,而非被技术取代。
273 6
|
人工智能 计算机视觉 Python
AI计算机视觉笔记八:基于mediapipe的虚拟绘画
该项目利用MediaPipe手部关键点识别技术,实现了隔空绘画功能。用户可以通过手势控制绘画工具,选择颜色或橡皮擦。环境配置基于`mediapipe_env`,在PyCharm中运行。项目包括两个文件:`AiVirtualPainter.py`负责绘画逻辑,`HandTrackingModule.py`用于手部关键点检测。此项目展示了AI技术在互动应用中的潜力,适合初学者实践与学习。
393 10