《中国人工智能学会通讯》——11.50 基于稀疏特征选择的异质人脸图 像合成

简介: 本节书摘来自CCAI《中国人工智能学会通讯》一书中的第11章,第11.50节, 更多章节内容可以访问云栖社区“CCAI”公众号查看。

11.50 基于稀疏特征选择的异质人脸图 像合成

分析发现现有的人脸画像 - 照片合成算法[3-7]多是基于 K 近邻的,即对于任意的输入图像块,均从训练图像块中选择固定个数 ( 例如 K) 的近邻。而实际中对于某些测试块,由于训练集大小限制,找到的距离最近的或者最相关的块的个数可能比K小,也可能比K大,并不一定完全等于K,而多出来的“近邻”块对算法而言相当于噪声,这给合成结果带来了一定的噪声。

稀疏表示在图像超分辨重建[8] 、图像去噪 [9]以及图像修复[10]中的应用已经取得一定进展。这些方法首先从训练数据中学习得到一个或一对字典;然后对于给定的测试图像块,用学习到的字典中的原子通过线性组合来重构该图像块,通过约束线性组合系数中非零元素个数尽量少来优化求解

c=argmin c ‖c‖ 1 , s.t.y=Dc (1)

该类方法的难点之一在于,如何设计从已有的训练数据中学习字典的算法。本文介绍的方法直接从训练图像块中选取图像块组成训练集,避免了学习字典的困难[11-12] 。由于稀疏表示能够从字典中选择一些原子来最大程度的重构测试图像块,对于不同的输入图像块,稀疏表示系数中非零元素的个数不同,即选择的原子个数以及原子均是自适应确定的,能够一定程度上克服上面提到的由于固定近邻个数 K 带来的噪声问题。

基于稀疏表示近邻选择的人脸画像合成算法框架如图 1 所示。其基本步骤为:① 将所有图像划分为大小均匀并保持相邻图像块有一定覆盖的图像块;② 对于输入测试照片的任一图像块,计算其在由训练照片块组成的字典上的稀疏表示系数;③ 保留稀疏表示系数绝对值大于给定阈值的系数不变,其余归置为 0;④ 用归置后的系数与由训练画像块组成的画像块字典线性组合即得待合成画像块,之后将所有合成的画像块填补成一张图像,覆盖区域取平均值。

image

相关文章
|
7月前
|
机器学习/深度学习 传感器 人工智能
人工智能图像数据
人工智能图像数据
76 3
|
7月前
|
机器学习/深度学习 人工智能 算法
从300亿分子中筛出6款,结构新且易合成,斯坦福抗生素设计AI模型登Nature子刊
【4月更文挑战第12天】斯坦福大学研究团队在Nature子刊发表论文,展示人工智能如何从300亿个分子中筛选出6种新型抗生素候选分子,为抗药性问题提供新解决方案。利用深度学习算法,AI模型考虑化学结构及合成可行性,发现独特化合物,加速药物研发。然而,成功应用还需临床试验验证及克服安全性和耐药性挑战。AI技术在药物设计中的角色引起关注,强调平衡使用与基础科学研究的重要性。
63 1
从300亿分子中筛出6款,结构新且易合成,斯坦福抗生素设计AI模型登Nature子刊
|
16天前
|
人工智能 自然语言处理 前端开发
Director:构建视频智能体的 AI 框架,用自然语言执行搜索、编辑、合成和生成等复杂视频任务
Director 是一个构建视频智能体的 AI 框架,用户可以通过自然语言命令执行复杂的视频任务,如搜索、编辑、合成和生成视频内容。该框架基于 VideoDB 的“视频即数据”基础设施,集成了多个预构建的视频代理和 AI API,支持高度定制化,适用于开发者和创作者。
75 9
Director:构建视频智能体的 AI 框架,用自然语言执行搜索、编辑、合成和生成等复杂视频任务
|
15天前
|
机器学习/深度学习 人工智能 自然语言处理
MMAudio:开源 AI 音频合成项目,根据视频或文本生成同步的音频
MMAudio 是一个基于多模态联合训练的高质量 AI 音频合成项目,能够根据视频内容或文本描述生成同步的音频。该项目适用于影视制作、游戏开发、虚拟现实等多种场景,提升用户体验。
66 7
MMAudio:开源 AI 音频合成项目,根据视频或文本生成同步的音频
|
4月前
|
机器学习/深度学习 人工智能 算法
【深度学习】python之人工智能应用篇——图像生成技术(二)
图像生成是计算机视觉和计算机图形学领域的一个重要研究方向,它指的是通过计算机算法和技术生成或合成图像的过程。随着深度学习、生成模型等技术的发展,图像生成领域取得了显著的进步,并在多个应用场景中发挥着重要作用。
191 9
|
4月前
|
机器学习/深度学习 人工智能 自然语言处理
【图像生成技术】人工智能在医疗健康领域的应用实例:图像生成技术的革新实践
在当今医疗健康的前沿阵地,人工智能(AI)技术正以前所未有的速度重塑着医疗服务的面貌,其中图像生成技术尤其在提升诊断精度、优化治疗策略及增强医疗教育方面展现出了巨大潜力。以下将通过一个简化的示例,展示如何利用深度学习模型,特别是生成对抗网络(GANs),来生成医学图像,并讨论其在实际医疗场景中的应用价值。
144 6
|
4月前
|
人工智能 安全 Anolis
中兴通讯分论坛邀您探讨 AI 时代下 OS 的安全能力 | 2024 龙蜥大会
操作系统如何提供符合场景要求的安全能力,构建更加安全可信的计算环境。
|
4月前
|
机器学习/深度学习 人工智能 搜索推荐
【图像生成技术】人工智能在广告营销的革新:图像生成技术的应用与实践代码示例
随着人工智能技术的飞速发展,广告营销行业迎来了前所未有的变革。图像生成技术,作为AI领域的一颗璀璨明星,正被广泛应用于创造个性化、高吸引力的产品展示图、海报乃至宣传视频,以精准对接目标受众,显著提升广告的转化率和整体营销效果。本文将深入探讨这一技术的应用场景,并通过一个简单的代码示例,展示如何利用深度学习框架TensorFlow来实现创意图像的自动生成。
108 4
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
|
4月前
|
人工智能 PyTorch 算法框架/工具
【人工智能】Transformers之Pipeline(六):图像分类(image-classification)
【人工智能】Transformers之Pipeline(六):图像分类(image-classification)
78 0