过去文生图主要以 SD 系列基础模型为主,仅支持英文的prompt,随着支持中文的文生图模型,如可图等,魔搭社区准备了中文的Prompt的技巧,以及一整本中文文生图咒语书,文末领取!
快手可图团队基于Kolors-Basemodel 提供 IP-Adapter-Plus 权重和推理代码,魔搭社区新鲜出炉最佳实践,结合中文咒语书,给你喜欢的IP定制风格吧!
文生图提示词技巧
提示词很重要,一般写法:主体描述,细节描述,背景描述,色彩描述,修饰词,艺术风格,艺术家
举个例子:抽象表现主义绘画 ,这是一个温馨的客厅,深棕色的餐桌上摆放着精致的水晶花瓶,花瓶里面插着几朵红色玫瑰,背景是落地窗和远方的夕阳,充满活力的笔法,大胆的色彩,抽象的形式,富有表现力,情感丰富。
prompt要素 |
内容示例 |
主体描述 |
这是一个温馨的客厅 |
细节描述 |
深棕色的餐桌上摆放着精致的水晶花瓶,花瓶里插着几朵红色玫瑰 |
背景描述 |
背景是落地窗和远方的夕阳 |
色彩描述 |
大胆的色彩 |
艺术风格 |
抽象表现主义绘画 |
风格描述 |
抽象的形式,富有表现力,情感丰富 |
清晰度 |
高清,细节 |
【负向prompts】丑陋、变形、嘈杂、模糊、低对比度、现实主义、真实感
文生图咒语书
因为文生图的prompt格式更加固定,魔搭社区开源了专门的各种风格的文生图咒语书,可以针对600+种不同风格,完善prompt,生成各种风格图片。
一位可爱的女孩prompt+多种风格咒语:
咒语书开源地址:
https://modelscope.cn/datasets/modelscope/Kolors_awesome_prompts/dataPeview
快来一起玩吧!
IP-adapter,保ID生成
快手可图团队基于Kolors-Basemodel 提供 IP-Adapter-Plus 权重和推理代码。使用更强大的图像特征提取器 Openai-CLIP-336 模型作为图像编码器,能够在参考图像中保留更多细节,使用更多样化和高质量的训练数据,构建了一个大规模和高质量的训练数据集,研究团队相信成对的训练数据可以有效提高性能。
模型链接:
https://modelscope.cn/models/Kwai-Kolors/Kolors-IP-Adapter-Plus
使用方式:
下载代码:
git clone https://github.com/Kwai-Kolors/Kolors cd Kolors pip install -r requirements.txt
下载模型权重:
基础模型:
modelscope download --model=Kwai-Kolors/Kolors --local_dir weights/Kolors
IP-adapter-plus模型:
modelscope download ---model=Kwai-Kolors/Kolors-IP-Adapter-Plus --local_dir weights/Kolors-IP-Adapter-Plus
推理代码:
python ipadapter/sample_ipadapter_plus.py ./ipadapter/https://raw.githubusercontent.com/junqiangwu/Kolors/master/ipadapter/assert/test_ip.jpg "穿着黑色T恤衫,上面中文绿色大字写着“可图”"
结合魔搭的中文咒语书,快来给你家猫猫创建各种风格照片吧!
点击链接👇直达原文
https://modelscope.cn/datasets/modelscope/Kolors_awesome_prompts/dataPeview?from=alizishequ__text