跨界人工智能,暮光之城女主角发表学术论文

简介: 当电影《暮光之城》的女主角 Kristen Stewart 在机器学习论文上作为作者出现时,研究人员都是感到很震惊的。这位 90 后著名影星最近作为联合作者在 arXiv 上(由康奈尔大学运营的在线研究数据库)发表了一篇论文。

1663EC87-B5E8-4E47-B160-560D555CF6AF.jpeg

Stewart 和其他作者发布的这篇文章主要是涉及「神经风格迁移」,并将其应用到 Stewart 制作并导演的电影短片《Come Swim》中。这部影片是「充满诗意的,心碎人在水下的印象派画像」,它使用风格迁移技术,使电影看上去就好像是画作一样。


EB1B1200-7053-4D58-9C24-050DCB6148CC.png


「我们通过神经风格迁移(Neural Style Transfer)重新绘制了电影中的关键场景(以手绘风格表现),从而为故事添加上一些艺术手法,这些实现基本上是逐帧转换的,它支撑起了整个电影。」


「绘画本身会激起个人在醒来第一时间的冥思(梦中与现实记忆之间的退却),所以将技术应用到关键场景将令我们想唤起的情绪映射到算法中。」


D3F574C2-0451-48C1-B5D9-2A2D4ACA7E3E.png


Stewart 希望利用风格转移技术完成一种新颖和优美的影片,她在论文描述了更多的技术细节,还有电影人如何才能够实现这一点。


风格迁移是一种有趣的技术,涉及使用卷积神经网络来实时地改变视频。要做到这一点,基本上你需要做的就是将你的算法应用到图像上(如梵高的画),然后再训练你的系统学习绘画手法并应用到任何常规图像上。该论文简短有力描述如何通过神经风格转化将印象派带入到所制作的作品 Come Swim 中。


早在论文《A Neural Algorithm of Artistic Style》中,研究者 Gatys、Ecker 和 Bethge 介绍了一种使用深度卷积神经网络(CNN)分类器的方法。其 pastiche 图像是通过优化(optimization)找到的:该算法会寻找一张给出了该 CNN 的底层中同种类型激活(activation)的图像,这些底层会获取风格输入(宽笔触和立体美感等等)的整体粗糙美感;该算法还会在更高层产生激活,这是获取能使对象可被识别出来的东西,这接近于那些由内容图像所得出来的东西。从某个起始点(如:随机噪声或内容图像本身)开始,该 pastiche 会逐渐细化,直到这些要求都得到满足。


另外在十月份谷歌《A Learned Representation For Artistic Style》论文中,研究者们探讨了如何构建单个、可延展深度网络,能够贪婪地捕捉不同派别的艺术风格。


李飞飞十月份也作为《Perceptual Losses for Real-Time Style Transfer and Super-Resolution》的作者讨论过风格迁移。她们的系统在训练之后,前馈网络能以比 Gatys 等人提出的基于优化的方法(optimization-based method)快数百倍的速度为图像改变风格。


论文:《Bringing Impressionism to Life with Neural Style Transfer in Come Swim》


6F4B0AD2-25A9-45A2-8E82-9B49B64BC3FF.png


摘要:神经风格迁移是近期开发出的先进技术,它使用神经网络艺术性的重绘(redraw) 原图像的风格。本论文探索了在制作环境中的技术应用,使用神经风格迁移用印象派绘画风格重绘电影短片《Come Swim》中的关键场景。我们记录了该技术如何在交互式的创造流程框架中进行部署,从而能获得想要的效果,也提出了一种将广阔的参数空间映射到创造性控制的关键设定的方式。我们希望这种映射方式能为未来的研究提供启发。



©本文由机器之心原创,转载请联系本公众号获得授权

相关文章
|
1月前
|
机器学习/深度学习 人工智能 算法
【AAAI 2024】再创佳绩!阿里云人工智能平台PAI多篇论文入选
阿里云人工智能平台PAI发表的多篇论文在AAAI-2024上正式亮相发表。AAAI是由国际人工智能促进协会主办的年会,是人工智能领域中历史最悠久、涵盖内容最广泛的国际顶级学术会议之一,也是中国计算机学会(CCF)推荐的A类国际学术会议。论文成果是阿里云与浙江大学、华南理工大学联合培养项目等共同研发,深耕以通用人工智能(AGI)为目标的一系列基础科学与工程问题,包括多模态理解模型、小样本类增量学习、深度表格学习和文档版面此次入选意味着阿里云人工智能平台PAI自研的深度学习算法达到了全球业界先进水平,获得了国际学者的认可,展现了阿里云人工智能技术创新在国际上的竞争力。
|
9月前
|
机器学习/深度学习 人工智能 自然语言处理
9月人工智能论文和项目推荐
因为LLM的火爆,所以最近的论文都是和LLM相关的
115 0
|
1月前
|
机器学习/深度学习 人工智能 边缘计算
【论文速递】9位院士Science88页长文:人工智能的进展、挑战与未来
【论文速递】9位院士Science88页长文:人工智能的进展、挑战与未来
|
8天前
|
机器学习/深度学习 人工智能 自然语言处理
【CVPR2024】阿里云人工智能平台PAI图像编辑算法论文入选CVPR2024
近期,阿里云人工智能平台PAI发表的图像编辑算法论文在CVPR-2024上正式亮相发表。论文成果是阿里云与华南理工大学贾奎教授领衔的团队共同研发。此次入选标志着阿里云人工智能平台PAI自主研发的图像编辑算法达到了先进水平,赢得了国际学术界的认可。在阿里云人工智能平台PAI算法团队和华南理工大学的老师学生们一同的坚持和热情下,将阿里云在图像生成与编辑领域的先进理念得以通过学术论文和会议的形式,向业界传递和展现。
|
1月前
|
存储 人工智能 算法
【论文阅读-问答】人工智能生成内容增强的甲状腺结节计算机辅助诊断模型:CHATGPT风格的助手
【论文阅读-问答】人工智能生成内容增强的甲状腺结节计算机辅助诊断模型:CHATGPT风格的助手
40 6
|
7月前
|
人工智能 编解码 测试技术
10月发布的5篇人工智能论文推荐
10月发布的5篇人工智能论文推荐
90 1
|
1月前
|
机器学习/深度学习 人工智能 自然语言处理
阿里云人工智能平台PAI多篇论文入选EMNLP 2023
近期,阿里云人工智能平台PAI主导的多篇论文在EMNLP2023上入选。EMNLP是人工智能自然语言处理领域的顶级国际会议,聚焦于自然语言处理技术在各个应用场景的学术研究,尤其重视自然语言处理的实证研究。该会议曾推动了预训练语言模型、文本挖掘、对话系统、机器翻译等自然语言处理领域的核心创新,在学术和工业界都有巨大的影响力。此次入选意味着阿里云人工智能平台PAI自研的自然语言处理算法达到了全球业界先进水平,获得了国际学者的认可,展现了中国人工智能技术创新在国际上的竞争力。
|
8月前
|
人工智能 算法
阿里云人工智能平台 PAI 扩散模型加速采样算法论文入选 CIKM 2023
近日CIKM 2023上,阿里云人工智能平台PAI和华东师范大学陈岑副教授团队主导的扩散模型加速采样算法论文《Optimal Linear Subspace Search: Learning to Construct Fast and High-Quality Schedulers for Diffusion Models》入选。此次入选意味着阿里云人工智能平台 PAI自研的扩散模型算法和框架达到了全球业界先进水平,获得了国际学者的认可,展现了中国人工智能技术创新在国际上的竞争力。
|
10月前
|
机器学习/深度学习 人工智能 算法
人工智能论文
目前,由于人工智能技术尚处于发展阶段,且以机器学习、深度学习为代表的新一代人工智能技术主要体现在算法层面,而成熟的实体终端产品并不多。下面主要对发展较为成熟,且已初具市场规模的三款终端产品予以介绍,分别是智能音箱、智能机器人和无人机。
134 1
|
XML 机器学习/深度学习 存储
6月人工智能论文推荐
6月人工智能论文推荐
94 1

热门文章

最新文章