Photoshop把AI论文demo打包实现了:照片上色、改年龄、换表情只需要点点鼠标

简介: 我们见过很多神经网络上色、换表情、修改年龄的研究和应用,但它们往往只存在于 GitHub 上,距离「人人能用」还有一段距离。但最近,推出 Photoshop 的 Adobe 这次终于有所表示了:你们论文里的效果,我们打包实现了。

微信图片_20211204182451.jpg


这两年,我们从很多论文中看到过一些令人惊艳的 demo,比如老照片自动上色、低画质图像秒变高清图像、普通图像一键变梵高风格等。

但对于不写代码、不玩模型的普通人来说,这些 demo 展示的应用还是非常遥远,或者只能从某个 APP 中找到其中一种。因此,经常有人会问:「我也想用这个 demo 里的效果,但不懂代码,我还有机会吗?」

先说答案:有。

这个答案来自大名鼎鼎的 Adobe。这家极富创意的公司最近在 Photoshop 22.0 版更新中推出了一个新的工具包——Neural Filters,把自动上色、超分辨率、风格迁移等之前很多论文展示的功能都打包到了一起。

先来看自动上色:

微信图片_20211204182454.gif


可以看到,整个过程能够一键完成。当然,如果你对某一处的上色效果不满意,可以选择手动调整:

微信图片_20211204182459.gif


其实,局部上色效果不佳是目前很多算法存在的共性问题,Photoshop 这种「自动 + 手动」的方法似乎更加灵活。

日常生活中的照片也经常存在分辨率不够高或被压成 JPEG 格式后画质变差的情况,而在 Neural Filters 中,这个问题也通过添加细节被克服了:微信图片_20211204182510.gif

image.gif

这波修复操作包括「增强图像细节」、「消除 JPEG 伪影」和「降噪」。


其他特色功能还包括风格迁移、年龄转换、角度变换、深度感知等:

微信图片_20211204182518.gif

有了这个滤镜,人人都是梵高。

微信图片_20211204182525.gif

image.gif

笑着笑着就老了。

微信图片_20211204182530.gifimage.gif

拍照爱歪头的同学有救了。

在表情调整方面,Neural Filters 也做出了改进。与之前 Liquify 使用原像素调整表情不同,Neural Filters 可以生成新的像素,使得调整后的表情更加明显,可调幅度更大。

微信图片_20211204182533.jpg


看完这些效果之后,不少网友表示:「心动了」,「买正版有动力了」。

微信图片_20211204182535.jpg


Adobe 官方页面介绍称,Neural Filters 是一款基于 Adobe Sensei 的机器学习工具包,通过生成原始图像中不存在的上下文像素来调整图像。

Adobe Sensei 并非一款单独的软件产品,而是一个可以应用于 Adobe 旗下各款产品的底层人工智能工具,于 2016 年正式发布。Sensei 利用了 Adobe 长期积累下来的大量数据和内容,从图片到影像,能够帮助人们解决在媒体素材创意过程中面临的一系列问题,例如如何在互联网上的海量图库里找到想要的图片,让软件明白某张照片、某张照片的一部分、某段视频以及某段文本描述的真实含义,帮助人们把一些固定、重复性的操作变得自动化和简单化。

这么强大的功能是在本地还是云端实现的呢?Adobe 介绍说,除了 Depth-Aware Haze 之外,Neural Filters 的大部分功能都是在本地运行的。表情、年龄调整等比较复杂的操作有些会在云端进行。

在使用这些功能时,软件会优先选择调用你的 GPU,如果没有高性能 GPU 就调用 CPU,但高性能的 GPU 不是必需的。


Neural Filters 怎么用


Neural Filters 的使用非常简单。首先,你需要从云端下载 filters 并开始编辑。点击 Filters > Neural Filters,你可以在 Neural Filters 工作区中找到 featured  filters 和 beta filters。

image.gif

微信图片_20211204182542.gif

具体来说,第一次使用需要完成以下三个步骤:

1. 选择 Filter > Neural Filters

微信图片_20211204182549.jpg

2. 从云端下载所需的 filters

任何在其旁边显示有云图标的 filters 在第一次使用前都需要从云端下载。点击云图标下载 filter。


微信图片_20211204182552.jpg

3. 启动和调整 filter

启用 filter,用右侧面板中的选项来创建所需的效果。


微信图片_20211204182554.jpg

Filter 类型

微信图片_20211204182557.jpg


Neural Filters 有 3 种类型的应用:

  • 功能齐全的应用:这些是已发布的 filters,符合严格标准。
  • Beta:这类 filters 仅限于测试,其背后的机器学习模型或工作流程还在改进中。你可以试用这些功能,但输出效果可能不理想。
  • 即将到来的 Filters:这类 filters 还没开发出来,但将来或许能实现。


注意:如果在图像中没有检测到人脸,肖像相关 filters 将会变灰。


输出选项

微信图片_20211204182600.jpg


你可以通过以下其中一种方式将生成的编辑内容另存为输出:

  • Current Layer:生成像素来修补当前层的破坏性操作。
  • Duplicate Layer:复制当前层,并将新的 filters 应用到新层。
  • Duplicate Layer masked:创建一个新层,并将 filters 用作新层的一个 mask。
  • New Layer:仅用新生成的像素生成一个新层。
  • Smart Filter:生成新的像素并将其作为一个智能 filter 应用。


有了 Neural Filters,PS 一张图再也不需要太多专业知识了,Neural Filters 会改变世界吗?

「有了神经网络滤镜,我们终于可以说 Photoshop 是全球最先进的 AI 应用了,」Adobe 数字成像副总裁 Maria Yap 说道。「现在,我们正在创造的图像是前所未有的。」

参考链接:https://helpx.adobe.com/photoshop/using/neural-filters-list-and-faq.html

相关文章
|
3月前
|
人工智能 物联网 调度
边缘大型AI模型:协作部署与物联网应用——论文阅读
论文《边缘大型AI模型:协作部署与物联网应用》系统探讨了将大模型(LAM)部署于边缘网络以赋能物联网的前沿框架。针对传统云端部署高延迟、隐私差的问题,提出“边缘LAM”新范式,通过联邦微调、专家混合与思维链推理等技术,实现低延迟、高隐私的分布式智能。
808 6
边缘大型AI模型:协作部署与物联网应用——论文阅读
|
9月前
|
人工智能 数据可视化 数据挖掘
AI竟能独立完成顶会论文!The AI Scientist-v2:开源端到端AI自主科研系统,自动探索科学假设生成论文
The AI Scientist-v2 是由 Sakana AI 等机构开发的端到端自主科研系统,通过树搜索算法与视觉语言模型反馈实现科学假设生成、实验执行及论文撰写全流程自动化,其生成论文已通过国际顶会同行评审。
621 34
AI竟能独立完成顶会论文!The AI Scientist-v2:开源端到端AI自主科研系统,自动探索科学假设生成论文
|
4月前
|
机器学习/深度学习 人工智能 资源调度
智能家居环境中的AI决策解释:实现以人为中心的可解释性——论文阅读
本文探讨智能家居中AI决策的可解释性,提出以人为中心的XAI框架。通过SHAP、DeepLIFT等技术提升模型透明度,结合用户认知与需求,构建三层解释体系,增强信任与交互效能。
351 19
智能家居环境中的AI决策解释:实现以人为中心的可解释性——论文阅读
|
9月前
|
机器学习/深度学习 人工智能 自然语言处理
还在想开题报告?SurveyGO卷姬:清华开源学术论文AI写作神器,一键生成文献综述
SurveyGO是清华与面壁智能联合开源的AI论文写作工具,采用LLMxMapReduce-V2技术实现文献智能聚合,能根据用户输入主题快速生成结构严谨、引用可靠的学术综述。
1222 1
还在想开题报告?SurveyGO卷姬:清华开源学术论文AI写作神器,一键生成文献综述
|
4月前
|
机器学习/深度学习 资源调度 算法框架/工具
AI-ANNE: 将神经网络迁移到微控制器的深度探索——论文阅读
AI-ANNE框架探索将深度学习模型迁移至微控制器的可行路径,基于MicroPython在Raspberry Pi Pico上实现神经网络核心组件,支持本地化推理,推动TinyML在边缘设备中的应用。
283 10
|
10月前
|
人工智能 自然语言处理 机器人
今日AI论文推荐:ReCamMaster、PLADIS、SmolDocling、FlowTok
由浙江大学、快手科技等机构提出的ReCamMaster是一个相机控制的生成式视频重渲染框架,可以使用新的相机轨迹重现输入视频的动态场景。该工作的核心创新在于利用预训练的文本到视频模型的生成能力,通过一种简单但强大的视频条件机制。为克服高质量训练数据的稀缺问题,研究者使用虚幻引擎5构建了一个全面的多相机同步视频数据集,涵盖多样化的场景和相机运动。
530 2
今日AI论文推荐:ReCamMaster、PLADIS、SmolDocling、FlowTok
|
4月前
|
人工智能 算法 开发者
2025年高教社杯E题——AI 辅助智能体测全国大学生数学建模(思路、代码、论文)
2025年高教社杯E题——AI 辅助智能体测全国大学生数学建模(思路、代码、论文)
513 1
|
9月前
|
人工智能 自然语言处理 算法
科研论文翻译神器!BabelDOC:开源AI工具让PDF论文秒变双语对照,公式图表全保留
BabelDOC 是一款专为科学论文设计的开源AI翻译工具,采用先进的无损解析技术和智能布局识别算法,能完美保留原文格式并生成双语对照翻译。
2509 67
科研论文翻译神器!BabelDOC:开源AI工具让PDF论文秒变双语对照,公式图表全保留
|
9月前
|
人工智能 编解码 自然语言处理
DreamActor-M1:字节跳动推出AI动画黑科技,静态照片秒变生动视频
DreamActor-M1是字节跳动研发的AI图像动画框架,通过混合引导机制实现高保真人物动画生成,支持多语言语音驱动和形状自适应功能。
839 40
DreamActor-M1:字节跳动推出AI动画黑科技,静态照片秒变生动视频
|
9月前
|
机器学习/深度学习 人工智能 JSON
这个AI把arXiv变成代码工厂,快速复现顶会算法!Paper2Code:AI论文自动转代码神器,多智能体框架颠覆科研复现
Paper2Code是由韩国科学技术院与DeepAuto.ai联合开发的多智能体框架,通过规划、分析和代码生成三阶段流程,将机器学习论文自动转化为可执行代码仓库,显著提升科研复现效率。
1200 19
这个AI把arXiv变成代码工厂,快速复现顶会算法!Paper2Code:AI论文自动转代码神器,多智能体框架颠覆科研复现