基于 PAI-ArtLab 使用 ComfyUI 搭建对话式 AI 女友

简介: 本实验介绍了一款名为“AI虚拟女友——胡桃”的应用,通过ComfyUI后端与WebUI展示效果,结合LLM节点和知识图谱工具包(KG),实现角色人设稳定及长期记忆功能。用户可通过输入信息与AI互动,并自定义人设知识图谱和角色LoRA。操作步骤包括登录PAI ArtLab平台、加载工作流文件、配置角色参数并与AI对话。此外,还提供了Graph RAG技术详解及常见问题解答,帮助用户更好地理解和使用该系统。

1. 实验基本信息

 

实验标题:AI 虚拟⼥友——胡桃

 

效果展示:ComfyUI 后端演示效果:

image.png

WebUI 演示效果:

image.png

⽂字介绍:

 

⼯作流的核⼼是我们研发的 comfyui_ LLM _party 中的 LLM 节点以及知识图谱⼯具包(KG)。凭借 LLM 节点的 tool calling 能⼒与包含了⻆⾊⼈设的知识图谱进⾏交互,从⽽实现⻆⾊的⼈设稳定。

 

通过将⽤户输⼊的信息中新的信息保存到知识图谱中,从⽽让AI ⼥友获得⻓期记忆。让 LLM 控制⻆⾊的语⾔以及表情,通过⻆⾊lora 实现实时⻆⾊表情的实时⽣成。⽤户可以更改⼈设知识图谱和⻆⾊ lora来获得⼀个只属于⾃⼰的 AI ⼥友。


2. 工具包介绍

image.png

image.png

3. 具体操作步骤

(1)   将工作流 json文件拖入 comfyui 中。

(2)   安装 LLM party以及其他未安装的节点。

(3)   重启 comfyui

(4)   选择你的女友人设知识图谱文件以及女友人设 lora (本次演示中只给出了一个,知识图谱文件以及女友人设lora 都可以让用户自主定制)。

(5)   通过用户输入框与 AI 女友进行对话。


(1) 登陆PAI ArtLab平台

登陆阿里云:请先点击链接https://aliyun.com/来到阿里云登陆界面,输入账密登陆。

  image.png

登陆成功后,完成账户个⼈实名认证。

image.png

登陆成功并且实名认证后,点击链接访问 PAI ArtLab

 

按提示逐步进⾏授权操作,开通 PAI ArtLab

  image.png

进⼊平台后,第⼀时间点击右上⻆「领取免费试⽤资源」,领取⽅式参考下图。

 

平台遵循后付费(按量计费)的计费模式。当您未领取免费试⽤资源或未购买资源包,使⽤平台产⽣的费⽤将从您的阿⾥云账号余额中扣除。请您使⽤前确保领取免费试⽤资源。

image.png

(2)   各个实验对应操作步骤。

领取完试⽤额度后后,⾸⻚⼯具箱点击「ComfyUI(专享版)」,拉起服务。

image.png

服务拉起后,点击「AI虚拟⼥友-胡桃」⼯作流,「加载」⼯作流⽂件,需要耐⼼等待⼏秒。

*ComfyUI ⼀键加载 Json ⼯作流,⽆需复杂操作。

image.png

在⻩⾊区域输⼊⽂字即可开始对话。

image.png

(3) 解锁更多玩法

image.png

image.png

Graph RAG 是微软研究院开发的一种创新性检索增强生成(RAG)方法,旨在提高大语言模型模型(LLM s)在处理复杂信息和私有数据集时的推理能力。它用大语言模型分析数据,建立知识图谱,回答用户关于私有数据的问题。


Graph RAG 能做什么?

Graph RAG 能连接大量信息,回答普通搜索难以解答的问题。它可以回答跨文档的问题,也能总结数据集的主要主题。

Graph RAG 的用途是什么?

Graph RAG 用于复杂信息分析,适合处理跨文档、有噪音或主题抽象的数据。

 

Graph RAG 特点

∙       知识图谱提取:使用 LLM 自动从输入文本文档中创建知识图谱,表示数据中的实体、关系和关键声明;

∙       层次聚类:使用 Leiden 技术对图进行层次聚类,识别密集连接节点的社区。(社区摘要:为层次结构中的每个社区生成摘要,提供对数据集的整体理解);

∙       增强查询处理:在查询时利用知识图谱和社区摘要,提供给比传统 RAG 方法更全面和多样化的响应;

∙        性能提升:与朴素的RAG 和层次文本摘要方法相比,Graph RAG 在全面性、多样性和赋能指标上表现更优,同时每次查询使用的token 更低。

(4) Q&A

Q:为什么我打开的⻚⾯是英⽂版?和教程⾥截图不⼀样。

A:可以 artlab ⻚⾯⾥找到右上⽅⼩⻮轮,点击后出现⾯板,按照下⽅操作在⾯板中选择切换语⾔⾄中⽂简体。

image.png

image.png

Q:我要如何查看当前任务进展呢?

A:右侧⾯板选择「显示队列」(View Queue),可以查看当前任务进度哦。

相关文章
|
5月前
|
人工智能 自然语言处理 IDE
模型微调不再被代码难住!PAI和Qwen3-Coder加速AI开发新体验
通义千问 AI 编程大模型 Qwen3-Coder 正式开源,阿里云人工智能平台 PAI 支持云上一键部署 Qwen3-Coder 模型,并可在交互式建模环境中使用 Qwen3-Coder 模型。
1013 109
|
9月前
|
机器学习/深度学习 人工智能 供应链
从概念到商业价值:AI、机器学习与深度学习全景指南
在这个科技飞速发展的时代🚀,人工智能正以惊人的速度渗透到我们的生活和工作中👀。但面对铺天盖地的AI术语和概念,很多人感到困惑不已😣。"AI"、"机器学习"、"深度学习"和"神经网络"到底有什么区别?它们如何相互关联?如何利用这些技术提升工作效率和创造价值?
478 0
|
7月前
|
机器学习/深度学习 人工智能 监控
AI 基础知识从0.1到0.2——用“房价预测”入门机器学习全流程
本系列文章深入讲解了从Seq2Seq、RNN到Transformer,再到GPT模型的关键技术原理与实现细节,帮助读者全面掌握Transformer及其在NLP中的应用。同时,通过一个房价预测的完整案例,介绍了算法工程师如何利用数据训练模型并解决实际问题,涵盖需求分析、数据收集、模型训练与部署等全流程。文章适合初学者和开发者学习AI基础与实战技能。
936 25
AI 基础知识从0.1到0.2——用“房价预测”入门机器学习全流程
|
8月前
|
人工智能 监控 测试技术
云上AI推理平台全掌握 (1):PAI-EAS LLM服务一键压测
在AI技术飞速发展的今天,大语言模型(LLM)、多模态模型等前沿技术正深刻改变行业格局。推理服务是大模型从“实验室突破”走向“产业级应用”的必要环节,需直面高并发流量洪峰、低延时响应诉求、异构硬件优化适配、成本精准控制等复杂挑战。 阿里云人工智能平台 PAI 致力于为用户提供全栈式、高可用的推理服务能力。在本系列技术专题中,我们将围绕分布式推理架构、Serverless 弹性资源全球调度、压测调优和服务可观测等关键技术方向,展现 PAI 平台在推理服务侧的产品能力,助力企业和开发者在 AI 时代抢占先机,让我们一起探索云上 AI 推理的无限可能,释放大模型的真正价值!
|
8月前
|
机器学习/深度学习 PyTorch API
昇腾AI4S图机器学习:DGL消息传递接口的PyG替换
DGL (Deep Graph Learning) 和 PyG (Pytorch Geometric) 是两个主流的图神经网络库,它们在API设计和底层实现上有一定差异,在不同场景下,研究人员会使用不同的依赖库,昇腾NPU对PyG图机器学习库的支持亲和度更高,因此有些时候需要做DGL接口的PyG替换。
|
9月前
|
数据可视化 Rust 机器学习/深度学习
mlop.ai 无脑使用教程 (机器学习工具 WandB/ClearML 的首个国区开源平替)
mlop.ai 是首个为国区用户优化的机器学习工具,全栈免费开源,是主流付费解决方案 ClearML/WandB 的开源平替。常规实验追踪的工具经常大幅人为降速,mlop因为底层为Rust代码,能轻松支持高频数据写入。如需更多开发者帮助或企业支持,敬请联系cn@mlop.ai
549 12
mlop.ai 无脑使用教程 (机器学习工具 WandB/ClearML 的首个国区开源平替)
|
8月前
|
机器学习/深度学习 PyTorch API
昇腾AI4S图机器学习:DGL图构建接口的PyG替换
本文探讨了在图神经网络中将DGL接口替换为PyG实现的方法,重点以RFdiffusion蛋白质设计模型中的SE3Transformer为例。SE3Transformer通过SE(3)等变性提取三维几何特征,其图构建部分依赖DGL接口。文章详细介绍了两个关键函数的替换:`make_full_graph` 和 `make_topk_graph`。前者构建完全连接图,后者生成k近邻图。通过PyG的高效实现(如`knn_graph`),我们简化了图结构创建过程,并调整边特征处理逻辑以兼容不同框架,从而更好地支持昇腾NPU等硬件环境。此方法为跨库迁移提供了实用参考。
|
11月前
|
机器学习/深度学习 人工智能 自然语言处理
AI训练师入行指南(三):机器学习算法和模型架构选择
从淘金到雕琢,将原始数据炼成智能珠宝!本文带您走进数字珠宝工坊,用算法工具打磨数据金砂。从基础的经典算法到精密的深度学习模型,结合电商、医疗、金融等场景实战,手把手教您选择合适工具,打造价值连城的智能应用。掌握AutoML改装套件与模型蒸馏术,让复杂问题迎刃而解。握紧算法刻刀,为数字世界雕刻文明!
391 6
|
11月前
|
JSON 数据格式
基于 PAI-ArtLab 使用 ComfyUI 生成服装面料迁移
本文介绍了通过PAI ArtLab平台将服装印花迁移到模特穿上的实验过程。首先,用户需登录阿里云并完成实名认证,访问PAI ArtLab平台领取免费试用资源。接着,在ComfyUI(专享版)中加载Json工作流文件,上传衣服版型、印花和模特图片,添加提示词队列等待生成结果。最后,提供了常见问题解答,如语言切换和任务进度查看方法。

热门文章

最新文章