PAI-DSW图像修复体验

本文涉及的产品
交互式建模 PAI-DSW,每月250计算时 3个月
模型训练 PAI-DLC,100CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
简介: 本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

一、介绍

随着人工智能和计算机视觉的发展,图像修复、去噪、上色等算法在众多领域有着广泛的应用。PAI-DSW作为一种先进的人工智能平台,提供了一系列功能强大的算法库,可以轻松实现图像修复、去噪、上色等任务。本文将介绍PAI-DSW在图像修复方面的应用,包括部署流程、算法效果及微调修复等方面。

二、PAI-DSW图像修复部署流程

2.1、准备工作

在开始部署之前,我们需要准备开通PAI-DSW(快速开通》》》),如果是老用户可以选择购买资源包。同时,我们可能还会使用的阿里云的notebook、oss等产品。

2.2、部署流程

启动PAI-DSW之后,我们可以选择创建一台支持资源抵扣的GPU服务器。

创建完服务器之后,我们进入到notebook环境,然后通过DSW Gallery快速导入用AI重燃亚运经典

接下来基本上是按照代码实例,一步步执行即可。

  • 首先,我们安装基础依赖并下载元数据;

  • 然后,选择适合的算法库,这次平台提供了以下算法,如Restormer、NAFNet、RealESRGAN、SwinIR、HAT、CodeFormer、DDC、DeOldify、Unicolor、LaMa等;

  • 接着,我们可以在notebook对算法库进行配置与优化,这包括调整参数、选择适当的硬件加速器等;
  • 最后,启动训练任务,并对图像进行推理任务。

三、PAI-DSW图像修复算法效果及性能分析

3.1、算法效果

通过实验,我发现PAI-DSW中利用相关算法之后,在图像修复方面取得了显著成果。

  • NAFNet:该算法发表于ECCV2022,可以用于对图像进行去噪,去模糊操作。在修复一些被遮挡或模糊的图像时,表现尤为出色。

  • RealESRGAN:该算法发表于ICCV workshop 2021,可以用于对图像超分。该算法通过基础预模型、通过GAN Loss训练的RealESRNet、然后使用动漫数据集微调的模型进行处理。

  • CodeFormer:该算法发表于NeurIPS 2022 用于人脸面部增强,并支持使用RealESRGAN进行背景的超分。与传统的面部增强方法相比,该算法具有更强的自适应能力和更高的修复速度。

  • DDC、DeOldify:这两个算法是比较经典能够将黑白图像上色,并产生丰富而自然的色彩效果。与传统的上色方法相比,该算法具有更强的自适应能力和更高的上色速度。

3.2、修复过程

通过以上算法效果进行修复之后,我们发现图片还是有一些失真。那么我们接下来需要通过局部上色、划痕清理以及Stable Diffusion WebUI进行微调。以下我附上修复过程的一些截图。

四、附上修复过程的一些错误及另外一组图的修复效果

五、结论

通过本次体验,我们发现PAI-DSW部署大模型算法在图像修复方面具有优异的表现。其提供的算法库不仅功能强大,而且部署简单、运行稳定。此外,PAI-DSW还支持多种硬件加速技术,能够满足不同场景下的性能需求。在未来的人工智能应用中,我们相信PAI-DSW将会发挥越来越重要的作用。

相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
目录
相关文章
|
8月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之图像生产功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
|
8月前
|
机器学习/深度学习 人工智能 数据安全/隐私保护
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
免费交互式大模型在线图像去除水印.擦除.替换和增强照片项目代码(免费在线图像修复工具)
|
机器学习/深度学习 人工智能 编解码
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
通过试用阿里 DSW 了解了命令行和 SD WebUI 两种方式进行老照片修复的相关知识
926 1
阿里 DSW 试用心得——用 PAI-DSW 修复老照片
|
26天前
|
人工智能 自然语言处理 机器人
OpenAI推出具有图像上传和分析功能的完整o1模型,并首次推出ChatGPT Pro
OpenAI推出具有图像上传和分析功能的完整o1模型,并首次推出ChatGPT Pro
|
3月前
|
人工智能
添加一个Stable Difussion图像生成应用,通过向AI助手简单的提问,即可快速搭建Stable Diffusion应用至自己的网站中,大幅提升开发效率。
添加一个Stable Difussion图像生成应用,通过向AI助手简单的提问,即可快速搭建Stable Diffusion应用至自己的网站中,大幅提升开发效率。
|
4月前
|
人工智能
在stable diffussion中完美修复AI图片
无论您的提示和模型有多好,一次性获得完美图像的情况很少见。修复小缺陷的不可或缺的方法是图像修复(inpainting)
在stable diffussion中完美修复AI图片
|
5月前
|
人工智能 文字识别 算法
视觉智能开放平台产品使用合集之是否支持老照片修复
视觉智能开放平台是指提供一系列基于视觉识别技术的API和服务的平台,这些服务通常包括图像识别、人脸识别、物体检测、文字识别、场景理解等。企业或开发者可以通过调用这些API,快速将视觉智能功能集成到自己的应用或服务中,而无需从零开始研发相关算法和技术。以下是一些常见的视觉智能开放平台产品及其应用场景的概览。
视觉智能开放平台产品使用合集之是否支持老照片修复
|
8月前
|
机器学习/深度学习 安全 Java
视觉智能平台常见问题之“图像生产”功能开通时一直开通不成功如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
|
8月前
|
机器学习/深度学习 数据处理 API
视觉智能平台常见问题之通用图像打标位置报警告如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。
视觉智能平台常见问题之通用图像打标位置报警告如何解决
|
8月前
|
机器学习/深度学习 监控 对象存储
视觉智能平台常见问题之人脸视频融和的mp4文件抽帧如何解决
视觉智能平台是利用机器学习和图像处理技术,提供图像识别、视频分析等智能视觉服务的平台;本合集针对该平台在使用中遇到的常见问题进行了收集和解答,以帮助开发者和企业用户在整合和部署视觉智能解决方案时,能够更快地定位问题并找到有效的解决策略。