开发者社区> 超努力的写代码> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

3个月实现产品落地,这个GitHub 8000星的AI实时换脸项目有APP了

简介: 让视频会议不再枯燥,一键换脸,想用谁的身份开会就用谁的身份。现在,这个名为 Avatarify 的 AI 换脸项目可以在苹果商店中下载使用了。
+关注继续查看


人类对于角色扮演的热情永远不会消退,这也是 AI 换脸广受追捧的原因。

三个月前,机器之心曾介绍过一个换脸项目 Avatarify。利用这项技术,你可以将自己的脸实时替换成别人的脸,在视频会议中的表现十分流畅。迄今为止这个项目已在 GitHub 上获得了 8.5k 的 star 量。

微信图片_20211204102813.png


这个项目主要借助今年三月份发布的一篇 arXiv 论文《First Order Motion》,无需事先对目标图像进行任何训练,就能用另一个人的视频来替换自己的图像。

在使用 Avatarify 时,借助 deepfake 等其他换脸技术,在想要交换的脸部图像上对算法进行训练。通过在目标图像的相似类别上训练算法,该模型支持实时换脸操作。

微信图片_20211204102445.jpg

一阶运动模型整体框架

具体的操作过程也非常简单:

先导入一张静态图片,照片中的五官会随着视频中真人动作做出相应的变化,比如挑眉毛、眨眼睛、说话等动作,看起来就像是换了个人在开会。

更方便的是,开发者已经将它做成了 app,目前可在苹果商店下载。

微信图片_20211204102448.jpg

Avatarify 已上架 APP Store。

这款应用的使用方法依然非常简单:在 app 中选择一张图片,即可开展一番表情操纵,最终生成的就是你想要的人脸视频了。

微信图片_20211204102451.jpg


也不知道是什么家庭背景,能让特朗普总统亲自为你的朋友送上生日祝福:「Happy birthday, Joe!」

微信图片_20211204102457.gif


你可以选择做个人,也可以放弃做人:

微信图片_20211204102501.gif


还有换脸界最喜欢的蒙娜丽莎:

微信图片_20211204102507.gif

蒙娜丽莎:「你喜欢我的微笑吗?」(Do you like my smile?)

试用效果

本着负责任的态度,我们对产品进行了试用。下图为真实使用效果,没有加特技的成分,可以看出,眼神转换和微笑弧度都被成功捕捉到:

微信图片_20211204102514.gif

除了 APP 提供的图像以外,你也可以自定义目标头像,但需要注意将目标头像裁剪为正方形,并且距离不能太远也不能太近。最好选择单一的背景,以最大程度上避免还原失真。

很多用户在社交平台上展示了他们的试用成果。虽然在五官动作的捕捉上比较精确,但如果加上仰头等动作的话,生成结果仍然会出现变形:

微信图片_20211204102524.gif


下图中,马斯克下半部分的脸有点跑偏:

微信图片_20211204102528.gif


当然这也和使用者的动作有关,表情管理能力越强,越能够以假乱真。

微信图片_20211204103013.png


三个月,从项目创建到产品落地

据 GitHub 项目介绍,这个项目自创建以来持续更新,具体时间表如下所示:

  • 2020.04.13:添加 Windows 支持。
  • 2020.04.15:添加 StyleGAN 生成的头像(ThisPersonDoesNotExist)。点击 Q 键,即可获得一张不存在的人的图像。每点击一次,即可轻松换头像。
  • 2020.04.17:创建 Slack 社区。
  • 2020.04.24:添加 Windows 安装教程。
  • 2020.05.07:针对所有平台添加远程 GPU 支持。
  • 2020.05.22:添加 Google Colab 模式,用户可以在没有 GPU 的计算机上运行 Avatarify。
  • 2020.07.11:添加 Docker 支持,用户可以在 Linux 上使用 Docker 运行 Avatarify。


几天前,Avatarify APP 在苹果 APP Store 上线。

从项目创建到商业化软件落地,Avatarify 的作者只用了三个多月的时间。

也许无聊真的是第一生产力。

参考链接:https://github.com/alievk/avatarify#configure-video-meeting-apphttps://avatarify.ai/

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
28款GitHub最流行的开源机器学习项目(一):TensorFlow排榜首
现在机器学习逐渐成为行业热门,经过二十几年的发展,机器学习得到了十分广泛的应用,如:数据挖掘、计算机视觉、自然语言处理、生物特征识别、搜索引擎、医学诊断、DNA序列测序、战略游戏和机器人等方面。 云栖社区特意翻译整理了目前GitHub上最受欢迎的28款开源的机器学习项目,以供开参考使用。
32369 0
手把手教你如何加入到github的开源世界! (转)
我曾经一直想加入到开源项目中,但是因为没有人指导流程,网上看了很多,基本都是说了个大概,如果你也是一个初出茅庐的人,那么,我将以自己提交的一次开源代码为例,教会你步入开源的世界。 1,首先登陆到https://github.com平台上注册一个自己的账号,这个过程我就不演示了 2,然后在左上部分输入一个开源项目的名字,我选择的是jvalidator,回车搜索。
1196 0
github上的开源项目
  Wagn 是一个采用 Ruby on Rails 开发的Wiki 软件。   你相信用100行代码可以实现一个博客吗?用Sinatra框架就可以做到。 Sinatra一个ruby轻量级的Web框架,封装了Web开发的DSL。
1538 0
JPG、PNG和GIF图片的基本原理及优…
JPG、PNG和GIF图片的基本原理及优化方法 一提到图片,我们就不得不从位图开始说起,位图图像(bitmap),也称为点阵图像或绘制图像,是由称作像素(图片元素)的单个点组成的。
1209 0
1940
文章
0
问答
文章排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载