PAI-DSW图像修复体验

本文涉及的产品
模型训练 PAI-DLC,100CU*H 3个月
交互式建模 PAI-DSW,每月250计算时 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: 本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

一、介绍

随着人工智能和计算机视觉的发展,图像修复、去噪、上色等算法在众多领域有着广泛的应用。PAI-DSW作为一种先进的人工智能平台,提供了一系列功能强大的算法库,可以轻松实现图像修复、去噪、上色等任务。本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

二、PAI-DSW图像修复部署流程

2.1、准备工作

在开始部署之前,我们需要准备开通PAI-DSW(快速开通》》》),如果是老用户可以选择购买资源包。同时,我们可能还会使用的阿里云的notebook、oss等产品。

2.2、部署流程

启动PAI-DSW之后,我们可以选择创建一台支持资源抵扣的GPU服务器。

创建完服务器之后,我们进入到notebook环境,然后通过DSW Gallery快速导入用AI重燃亚运经典

接下来基本上是按照代码实例,一步步执行即可。

  • 首先,我们安装基础依赖并下载元数据;

  • 然后,选择适合的算法库,这次平台提供了以下算法,如Restormer、NAFNet、RealESRGAN、SwinIR、HAT、CodeFormer、DDC、DeOldify、Unicolor、LaMa等;

  • 接着,我们可以在notebook对算法库进行配置与优化,这包括调整参数、选择适当的硬件加速器等;
  • 最后,启动训练任务,并对图像进行推理任务。

三、PAI-DSW图像修复算法效果及性能分析

3.1、算法效果

通过实验,我发现PAI-DSW中利用相关算法之后,在图像修复方面取得了显著成果。

  • NAFNet:该算法发表于ECCV2022,可以用于对图像进行去噪,去模糊操作。在修复一些被遮挡或模糊的图像时,表现尤为出色。

  • RealESRGAN:该算法发表于ICCV workshop 2021,可以用于对图像超分。该算法通过基础预模型、通过GAN Loss训练的RealESRNet、然后使用动漫数据集微调的模型进行处理。

  • CodeFormer:该算法发表于NeurIPS 2022 用于人脸面部增强,并支持使用RealESRGAN进行背景的超分。与传统的面部增强方法相比,该算法具有更强的自适应能力和更高的修复速度。

  • DDC、DeOldify:这两个算法是比较经典能够将黑白图像上色,并产生丰富而自然的色彩效果。与传统的上色方法相比,该算法具有更强的自适应能力和更高的上色速度。

3.2、修复过程

通过以上算法效果进行修复之后,我们发现图片还是有一些失真。那么我们接下来需要通过局部上色、划痕清理以及Stable Diffusion WebUI进行微调。以下我附上修复过程的一些截图。

四、附上修复过程的一些错误及另外一组图的修复效果

五、结论

通过本次体验,我们发现PAI-DSW部署大模型算法在图像修复方面具有优异的表现。其提供的算法库不仅功能强大,而且部署简单、运行稳定。此外,PAI-DSW还支持多种硬件加速技术,能够满足不同场景下的性能需求。在未来的人工智能应用中,我们相信PAI-DSW将会发挥越来越重要的作用。

相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
目录
相关文章
|
7月前
|
人工智能
KOALA图像AI模型发布,低配电脑2秒生图
【2月更文挑战第13天】KOALA图像AI模型发布,低配电脑2秒生图
106 2
KOALA图像AI模型发布,低配电脑2秒生图
|
7月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之图像生产功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
|
7月前
|
机器学习/深度学习 人工智能 数据安全/隐私保护
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
|
机器学习/深度学习 人工智能 编解码
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
通过试用阿里 DSW 了解了命令行和 SD WebUI 两种方式进行老照片修复的相关知识
884 1
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
|
26天前
|
算法 Serverless
通过函数计算部署ComfyUI以实现一个AIGC图像生成系统
快来报名参与ComfyUI活动,体验一键部署模型,生成粘土风格作品赢取体脂秤。活动时间从即日起至2024年12月13日24:00:00,每个工作日限量50个,先到先得!访问活动页面了解更多详情。
146 54
|
20天前
|
弹性计算 Serverless 数据安全/隐私保护
针对【图像生成 - ComfyUI】使用的深度评测
ComfyUI 是一款支持自定义工作流的图像生成工具,适用于创意设计、游戏开发和电商等多个行业。它能根据项目需求灵活调整图像生成流程,提高创意实现效率,同时具备成本效益和弹性伸缩能力,适应业务量变化。尽管如此,ComfyUI 在技术门槛和数据安全方面仍存在挑战,需注意非专业用户的学习曲线和敏感数据保护。
|
25天前
|
弹性计算 算法 搜索推荐
活动实践 | 通过函数计算部署ComfyUI以实现一个AIGC图像生成系统
ComfyUI是基于节点工作流稳定扩散算法的新一代WebUI,支持高质量图像生成。用户可通过阿里云函数计算快速部署ComfyUI应用模板,实现个性化定制与高效服务。首次生成图像因冷启动需稍长时间,之后将显著加速。此外,ComfyUI允许自定义模型和插件,满足多样化创作需求。
|
4月前
|
人工智能 文字识别 算法
视觉智能开放平台产品使用合集之是否支持老照片修复
视觉智能开放平台是指提供一系列基于视觉识别技术的API和服务的平台,这些服务通常包括图像识别、人脸识别、物体检测、文字识别、场景理解等。企业或开发者可以通过调用这些API,快速将视觉智能功能集成到自己的应用或服务中,而无需从零开始研发相关算法和技术。以下是一些常见的视觉智能开放平台产品及其应用场景的概览。
视觉智能开放平台产品使用合集之是否支持老照片修复
|
7月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之“图像生产”功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
|
5月前
|
自然语言处理 开发者
通用文本向量模型全新升级至V3,开通百炼速来体验~~
阿里云新推出通用文本向量模型text-embedding-v3,基于LLM,支持50+语言,包括新增的意大利语等。模型升级亮点:8K长文本支持、可变向量维度、Sparse向量及不分Query/Document类型。现在提供50万免费tokens,有效期180天,计费0.0007元/1000 tokens。体验请访问[阿里云百炼官网](https://bailian.console.aliyun.com/?spm=a2c6h.13046898.publish-article.6.63066ffaL32qHM)
下一篇
DataWorks