PAI-DSW图像修复体验

本文涉及的产品
交互式建模 PAI-DSW,5000CU*H 3个月
简介: 本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

一、介绍

随着人工智能和计算机视觉的发展,图像修复、去噪、上色等算法在众多领域有着广泛的应用。PAI-DSW作为一种先进的人工智能平台,提供了一系列功能强大的算法库,可以轻松实现图像修复、去噪、上色等任务。本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

二、PAI-DSW图像修复部署流程

2.1、准备工作

在开始部署之前,我们需要准备开通PAI-DSW(快速开通》》》),如果是老用户可以选择购买资源包。同时,我们可能还会使用的阿里云的notebook、oss等产品。

2.2、部署流程

启动PAI-DSW之后,我们可以选择创建一台支持资源抵扣的GPU服务器。

创建完服务器之后,我们进入到notebook环境,然后通过DSW Gallery快速导入用AI重燃亚运经典

接下来基本上是按照代码实例,一步步执行即可。

  • 首先,我们安装基础依赖并下载元数据;

  • 然后,选择适合的算法库,这次平台提供了以下算法,如Restormer、NAFNet、RealESRGAN、SwinIR、HAT、CodeFormer、DDC、DeOldify、Unicolor、LaMa等;

  • 接着,我们可以在notebook对算法库进行配置与优化,这包括调整参数、选择适当的硬件加速器等;
  • 最后,启动训练任务,并对图像进行推理任务。

三、PAI-DSW图像修复算法效果及性能分析

3.1、算法效果

通过实验,我发现PAI-DSW中利用相关算法之后,在图像修复方面取得了显著成果。

  • NAFNet:该算法发表于ECCV2022,可以用于对图像进行去噪,去模糊操作。在修复一些被遮挡或模糊的图像时,表现尤为出色。

  • RealESRGAN:该算法发表于ICCV workshop 2021,可以用于对图像超分。该算法通过基础预模型、通过GAN Loss训练的RealESRNet、然后使用动漫数据集微调的模型进行处理。

  • CodeFormer:该算法发表于NeurIPS 2022 用于人脸面部增强,并支持使用RealESRGAN进行背景的超分。与传统的面部增强方法相比,该算法具有更强的自适应能力和更高的修复速度。

  • DDC、DeOldify:这两个算法是比较经典能够将黑白图像上色,并产生丰富而自然的色彩效果。与传统的上色方法相比,该算法具有更强的自适应能力和更高的上色速度。

3.2、修复过程

通过以上算法效果进行修复之后,我们发现图片还是有一些失真。那么我们接下来需要通过局部上色、划痕清理以及Stable Diffusion WebUI进行微调。以下我附上修复过程的一些截图。

四、附上修复过程的一些错误及另外一组图的修复效果

五、结论

通过本次体验,我们发现PAI-DSW部署大模型算法在图像修复方面具有优异的表现。其提供的算法库不仅功能强大,而且部署简单、运行稳定。此外,PAI-DSW还支持多种硬件加速技术,能够满足不同场景下的性能需求。在未来的人工智能应用中,我们相信PAI-DSW将会发挥越来越重要的作用。

相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
目录
相关文章
|
2月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之图像生产功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
32 0
|
2月前
|
人工智能
KOALA图像AI模型发布,低配电脑2秒生图
【2月更文挑战第13天】KOALA图像AI模型发布,低配电脑2秒生图
38 2
KOALA图像AI模型发布,低配电脑2秒生图
|
3月前
|
机器学习/深度学习 人工智能 数据安全/隐私保护
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
55 0
|
9月前
|
机器学习/深度学习 人工智能 编解码
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
通过试用阿里 DSW 了解了命令行和 SD WebUI 两种方式进行老照片修复的相关知识
644 1
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
|
机器学习/深度学习 人工智能 自然语言处理
ModelScope在线体验模型测试
ModelScope在线体验模型测试
40943 3
ModelScope在线体验模型测试
|
2月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之“图像生产”功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
24 0
|
2月前
|
机器学习/深度学习 算法 计算机视觉
视觉智能平台常见问题之量具检测训练好了调用模型如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
20 0
|
2月前
|
机器学习/深度学习 人工智能 监控
视觉智能平台常见问题之体验产品的美颜测试关掉如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
24 1
|
7月前
|
人工智能 算法
AI 绘画Stable Diffusion 研究(九)sd图生图功能详解-老照片高清修复放大(2)
AI 绘画Stable Diffusion 研究(九)sd图生图功能详解-老照片高清修复放大
629 0
|
7月前
|
人工智能 前端开发 算法框架/工具
AI 绘画Stable Diffusion 研究(九)sd图生图功能详解-老照片高清修复放大(1)
AI 绘画Stable Diffusion 研究(九)sd图生图功能详解-老照片高清修复放大
537 0