世界首部AI创作漫画正式发表:StyleGAN神还原《铁臂阿童木》画风,继承手冢治虫衣钵

简介: 云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 传奇的作者打造传世的作品,但作者逝世了,又该怎么办? 用AI来“传宗接代”。 最近,便有团队利用英伟达的StyleGAN,为已经逝世的传奇漫画家——手冢治虫的作品“续命”。

云栖号资讯:【点击查看更多行业资讯
在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来!


传奇的作者打造传世的作品,但作者逝世了,又该怎么办?

用AI来“传宗接代”。

最近,便有团队利用英伟达的StyleGAN,为已经逝世的传奇漫画家——手冢治虫的作品“续命”。

提到手冢治虫,你可能会觉得陌生,但提到《铁臂阿童木》,“大龄”小伙伴们就再熟悉不过了吧?

1

为了延续他的作品,来自记忆体制造商KIOXIA的研究人员和艺术团队,与日本株式会社联手,利用深度学习(StyleGAN),创造了世界上第一部由AI生成的漫画——《PHAEDO》。

为了利于生成漫画角色,团队分析了手冢先生数百部漫画作品,包括《铁臂阿童木》、《森林大帝》、《怪医黑杰克》等等。

《PHAEDO》已经在日本《晨间》周刊上发表。

2

这部新漫画,可以说是很好的传承了手冢先生的衣钵。

让漫画之神的作品“传宗接代”

《PHAEDO》这部漫画,其实是Kioxia公司一个叫#FutureMemories 01 “TEZUKA 2020”的项目。

项目负责人东原良平(Ryohei Orihara)介绍说:

它是由AI和人类,根据手冢治虫的许多记忆创造出一件作品的项目。漫画这种艺术表现形式,在世界范围内广为人知,并且被几代人所阅读和喜爱。

3

为了让AI学习手冢治虫作品的特点,研究人员将漫画人物面部的特征转化为数据,分析在不同场景下剧情发展的情况。

而角色生成阶段的核心技术,就是英伟达的StyleGAN。

而为了生成一个与StyleGAN一起使用的训练数据集,来自公立函馆未来大学Mukaiyama教授团队从手冢先生的作品中收集了超过10000张面部图像数据集,这些图像可以用来训练模型。

Mukaiyama表示:

我们还让计算机学习手冢作品之外的人脸图像,包括真人的面部图像,让它学习通过左右翻转人脸,产生增强的数据。

训练和推理使用多个NVIDIA V100 GPU,以及StyleGAN编写的cuDNN加速的TensorFlow深度学习框架。

在第一阶段,StyleGAN在单一过程中生成了人脸,研究人员说:

我们试图生成更完整的图像,其中眼睛、鼻子和嘴巴等细微的细节都是从轮廓等粗糙的描绘中逐渐生成的。

4

接下来,团队决定只使用手冢治虫漫画中的女性角色。

5

最终,团队利用迁移学习,将数千个数据点整合在一起,实现了类似手冢作品的风格。

6

通过结合角色的不同个体特征,研究人员发现可以创造出从未出现过的角色。这种机制通过调整结合时的比例,来让生成的角色产生变化。

Orihara说,他最初并不相信迁移学习可以做到这一点,毕竟模型内部就像“黑箱”一样,是未知的。

但这就是深度学习非常有趣的原因。

看到角色一个接一个的被创造出来,这个过程是非常有意思的。

作品出来了,发表又遇到了问题。

最开始,《晨间》周刊的主编Miura是拒绝刊登这部漫画的,他认为项目过程中有太多的人为干预因素。

但在与团队多次交涉过后,Miura改变了主意:

我最终意识到,这个项目也可以用来分析人类是如何创作漫画的,

我想表明,创造一个可以在这些作品中绘制漫画的AI,本身就是一个人类的创造过程。

关于手冢治虫

手冢治虫(1928年11月3日—1989年2月9日),本名手冢治,因喜爱昆虫而取了“手冢治虫”的笔名。漫画家、动画制作人、医学博士。

7

1947年以漫画《新宝岛》奠定了日本漫画的叙述方式,创立了日本漫画意识形态,极大的扩张了新漫画的表现力。1952年作品《铁臂阿童木》轰动日本,1953年的《缎带骑士》则是公认的世界第一部少女漫画。漫画作品《火之鸟》至今被普遍认为日本漫画界最高杰作。

640

同时,他也是日本第一位导入助手制度与企业化经营的漫画家。1961年成立“虫Production动画部”,翌年以“虫制作公司”的名义开始活动,日本第一部多集TV动画《铁臂阿童木》、第一部彩色多集TV动画《森林大帝》均诞生于此。1973年虫制作商事倒闭,欠下三亿巨额债务,仍然不停止漫画创作活动,同年以作品《怪医黑杰克》俘虏全国读者,创下多项纪录。

One More Thing

漫画之神手冢治虫教我们用科技来描绘梦想的乐趣。同时,他坚持认为,科学不应该抛弃人性。

于是,KIOXIA在项目的官网上,还提出了这样的一个问题:

如果手冢治虫现在还在世,他眼中(漫画作品)的未来会是什么样子呢?

8

除了他本人,应该没有人能给出精确的答案。

但利用AI,或许能够为这个问题,提供一个方向。

【云栖号在线课堂】每天都有产品技术专家分享!
课程地址:https://yqh.aliyun.com/live

立即加入社群,与专家面对面,及时了解课程最新动态!
【云栖号在线课堂 社群】https://c.tb.cn/F3.Z8gvnK

原文发布时间:2020-04-21
本文作者:十三
本文来自:“量子位公众号”,了解相关信息可以关注“公众号 QbitAI”

相关文章
|
7月前
|
人工智能 自然语言处理 开发者
AIGC创作活动 | 跟着UP主秋葉一起部署AI视频生成应用!
本次AI创作活动由 B 站知名 AI Up 主“秋葉aaaki”带您学习在阿里云 模型在线服务(PAI-EAS)中零代码、一键部署基于ComfyUI和Stable Video Diffusion模型的AI视频生成Web应用,快速实现文本生成视频的AI生成解决方案,帮助您完成社交平台短视频内容生成、动画制作等任务。制作上传专属GIF视频,即有机会赢取乐歌M2S台式升降桌、天猫精灵、定制保温杯等好礼!
|
6月前
|
机器学习/深度学习 人工智能 程序员
[AI StoryDiffusion] 创造神奇故事,AI漫画大乱斗!
探索神奇AI项目StoryDiffusion,为您带来一致性连贯的图像和视频创作体验。
[AI StoryDiffusion] 创造神奇故事,AI漫画大乱斗!
|
5月前
|
机器学习/深度学习 人工智能 算法
解决方案评测:通义万相 AI 绘画创作
通义万相 AI 绘画创作工具在功能、使用体验等方面表现出色,为用户提供了一种便捷、高效的绘画创作方式。虽然存在一些不足之处,但随着技术的不断发展和优化,相信其性能和表现会不断提升。对于艺术家、设计师、创意工作者以及普通爱好者来说,通义万相都是一款值得尝试和探索的 AI 绘画工具。
451 4
解决方案评测:通义万相 AI 绘画创作
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
AICG驱动的叙事革命:AI在电影剧本创作中的角色
【7月更文第25天】随着人工智能技术的发展,尤其是自然语言处理(NLP)的进步,AI已经开始涉足创意写作领域。在电影行业中,AI不仅能够帮助创作概念和大纲,甚至还能生成完整的剧本草稿。本文将探讨AI如何改变电影剧本创作,并通过一个简单的Python示例展示如何利用AI模型生成剧本片段。
132 3
|
5月前
|
人工智能 弹性计算 自然语言处理
通义万相AI创作绘画产品方案产品体验
本次我有幸接触并体验了阿里云通义万相这一创新的AI绘画工具方案。该方案它是在利用人工智能技术,为用户提供创新、便捷的绘画创作体验。在体验过程中,我主要关注了产品的易用性、功能性、创新性、用户体验及方案本身等方面。
172 3
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
|
6月前
|
人工智能 定位技术 图形学
【unity实战】制作敌人的AI,使用有限状态机、继承和抽象类多态 定义不同状态的敌人行为
【unity实战】制作敌人的AI,使用有限状态机、继承和抽象类多态 定义不同状态的敌人行为
171 1
|
6月前
|
人工智能 JSON Serverless
AI “黏土画风”轻松拿捏,手把手带你云端部署 ComfyUI
ComfyUI 是一款基于节点工作流稳定扩散算法的全新 WebUI,相对于传统的 WebUI,ComfyUI 的部署和学习曲线较陡峭,函数计算基于 Serverless 应用中心开发“ComfyUI 应用模版”,简化开发者的部署流程,帮助简单、快捷实现全新而精致的绘画体验,点击本文查看一键部署 ComfyUI 的方法。
17157 7
|
6月前
|
机器学习/深度学习 人工智能 算法
OpenAI发布全新AI视频模型Sora:引领视频创作新纪元
OpenAI发布全新AI视频模型Sora:引领视频创作新纪元
|
5月前
|
机器学习/深度学习 人工智能
AI 助力,歌词创作不再是难题
妙笔生词智能写歌词软件,借助AI技术,突破音乐创作难题。通过深度学习大量优秀歌词,理解词汇、句式和韵律,只需输入主题、风格和情感,即可快速生成创意歌词初稿,覆盖多种音乐风格。这款工具助你打破创作瓶颈,激发灵感,让歌词创作更高效、更具乐趣,聚焦音乐的情感表达。