跨界人工智能,暮光之城女主角发表学术论文

简介: 当电影《暮光之城》的女主角 Kristen Stewart 在机器学习论文上作为作者出现时,研究人员都是感到很震惊的。这位 90 后著名影星最近作为联合作者在 arXiv 上(由康奈尔大学运营的在线研究数据库)发表了一篇论文。

1663EC87-B5E8-4E47-B160-560D555CF6AF.jpeg

Stewart 和其他作者发布的这篇文章主要是涉及「神经风格迁移」,并将其应用到 Stewart 制作并导演的电影短片《Come Swim》中。这部影片是「充满诗意的,心碎人在水下的印象派画像」,它使用风格迁移技术,使电影看上去就好像是画作一样。


EB1B1200-7053-4D58-9C24-050DCB6148CC.png


「我们通过神经风格迁移(Neural Style Transfer)重新绘制了电影中的关键场景(以手绘风格表现),从而为故事添加上一些艺术手法,这些实现基本上是逐帧转换的,它支撑起了整个电影。」


「绘画本身会激起个人在醒来第一时间的冥思(梦中与现实记忆之间的退却),所以将技术应用到关键场景将令我们想唤起的情绪映射到算法中。」


D3F574C2-0451-48C1-B5D9-2A2D4ACA7E3E.png


Stewart 希望利用风格转移技术完成一种新颖和优美的影片,她在论文描述了更多的技术细节,还有电影人如何才能够实现这一点。


风格迁移是一种有趣的技术,涉及使用卷积神经网络来实时地改变视频。要做到这一点,基本上你需要做的就是将你的算法应用到图像上(如梵高的画),然后再训练你的系统学习绘画手法并应用到任何常规图像上。该论文简短有力描述如何通过神经风格转化将印象派带入到所制作的作品 Come Swim 中。


早在论文《A Neural Algorithm of Artistic Style》中,研究者 Gatys、Ecker 和 Bethge 介绍了一种使用深度卷积神经网络(CNN)分类器的方法。其 pastiche 图像是通过优化(optimization)找到的:该算法会寻找一张给出了该 CNN 的底层中同种类型激活(activation)的图像,这些底层会获取风格输入(宽笔触和立体美感等等)的整体粗糙美感;该算法还会在更高层产生激活,这是获取能使对象可被识别出来的东西,这接近于那些由内容图像所得出来的东西。从某个起始点(如:随机噪声或内容图像本身)开始,该 pastiche 会逐渐细化,直到这些要求都得到满足。


另外在十月份谷歌《A Learned Representation For Artistic Style》论文中,研究者们探讨了如何构建单个、可延展深度网络,能够贪婪地捕捉不同派别的艺术风格。


李飞飞十月份也作为《Perceptual Losses for Real-Time Style Transfer and Super-Resolution》的作者讨论过风格迁移。她们的系统在训练之后,前馈网络能以比 Gatys 等人提出的基于优化的方法(optimization-based method)快数百倍的速度为图像改变风格。


论文:《Bringing Impressionism to Life with Neural Style Transfer in Come Swim》


6F4B0AD2-25A9-45A2-8E82-9B49B64BC3FF.png


摘要:神经风格迁移是近期开发出的先进技术,它使用神经网络艺术性的重绘(redraw) 原图像的风格。本论文探索了在制作环境中的技术应用,使用神经风格迁移用印象派绘画风格重绘电影短片《Come Swim》中的关键场景。我们记录了该技术如何在交互式的创造流程框架中进行部署,从而能获得想要的效果,也提出了一种将广阔的参数空间映射到创造性控制的关键设定的方式。我们希望这种映射方式能为未来的研究提供启发。



©本文由机器之心原创,转载请联系本公众号获得授权

相关文章
|
12天前
|
人工智能
2025年人工智能与可持续发展国际学术会议 2025 International Conference on Artificial Intelligence and Sustainable Development (ICAISD 2025)
2025年人工智能与可持续发展国际学术会议 2025 International Conference on Artificial Intelligence and Sustainable Development (ICAISD 2025)
51 7
|
13天前
|
机器学习/深度学习 人工智能 机器人
推荐一些关于将图形学先验知识融入人工智能模型的研究论文
推荐一些关于将图形学先验知识融入人工智能模型的研究论文
|
20天前
|
机器学习/深度学习 人工智能 自然语言处理
【EMNLP2024】阿里云人工智能平台 PAI 多篇论文入选 EMNLP2024
阿里云人工智能平台 PAI 的多篇论文在 EMNLP2024 上入选。论文成果是阿里云与华南理工大学金连文教授团队、复旦大学王鹏教授团队共同研发。EMNLP 是人工智能自然语言处理领域的顶级国际会议,聚焦于自然语言处理技术在各个应用场景的学术研究,尤其重视自然语言处理的实证研究。该会议曾推动了预训练语言模型、文本挖掘、对话系统、机器翻译等自然语言处理领域的核心创新,在学术和工业界都有巨大的影响力。此次入选标志着阿里云人工智能平台 PAI 在自然语言处理和多模态算法能力方面研究获得了学术界认可。
|
1月前
|
自然语言处理 算法 安全
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-16
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-16
20 0
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-16
|
1月前
|
机器学习/深度学习 安全 算法
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-23(下)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-23(下)
35 0
|
1月前
|
安全 搜索推荐 算法
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-23(上)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-23(上)
32 0
|
1月前
|
自然语言处理 搜索推荐 算法
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-21(下)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-21(下)
33 0
|
1月前
|
机器学习/深度学习 人工智能 自然语言处理
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-21(上)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-21(上)
26 0
|
1月前
|
机器学习/深度学习 人工智能 算法
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-20(下)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-20(下)
22 0
|
1月前
|
机器学习/深度学习 存储 人工智能
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-20(上)
计算机前沿技术-人工智能算法-大语言模型-最新论文阅读-2024-09-20(上)
23 0

热门文章

最新文章

下一篇
无影云桌面