谷歌发布“怪兽生成器”!你画草图,GAN帮你生成幻想生物

简介: 谷歌发布“怪兽生成器”!你画草图,GAN帮你生成幻想生物

不知道你是否听说过这样一个游戏——《山海GO》,名字是不是有点眼熟?没错,和口袋妖怪GO类似,只不过,在这款游戏中收集的都是《山海经》中的鬼怪~ 就像这样:

近日,谷歌发布了一个小工具,有了这个工具,随手涂个鸦就能变成3D立体小怪兽。这听起来有点意思,或许未来像《山海GO》里面的角色卡片,都可以让玩家自行创造呢~

那我们先来看看谷歌这款工具是怎么把涂鸦变怪兽的:

原来我们只需要用不同的色块画出怪兽不同的部位就可以了,剩下的通过AI来渲染。文摘菌窃喜,我们手残党再也不用害怕画画了,画得不好就交给AI呗~

这个工具叫做Chimera Painter,这是一种机器学习模型,可以根据用户提供的生物轮廓自动填充完整并加以渲染。这种技术在AI圈颇为流行,英伟达就曾利用AI填充过风景画,MIT和IBM也曾用来填充过建筑物的效果图。

谷歌研究人员称,他们想要创造一种“不像工具,更像助手的画笔”。Chimera Painter只是一个原型,但如果这样的软件变得普遍,它可以“减少创造高质量艺术所需的时间”。

研究人员之所以创建这样的工具,是想挑战为一个虚构的幻想纸牌游戏创作角色卡片,在这个游戏中,玩家可以将不同怪物的特征结合起来,并像对付变了形的口袋妖怪一样对付它们。

研究人员生成的虚拟怪物角色卡片

为了创建这些角色卡片,研究人员用到了生成对抗网络(GAN)。GAN可以将两个卷积神经网络相互配对:一个用于生成新图像的生成器网络,一个用于确定这些图像是否来自训练数据集的鉴别器网络。

为了训练GAN,研究人员创建了全彩色图像的数据集,其中包含根据3D生物模型改编的单一物种生物轮廓。该生物轮廓线描绘了每个生物的形状和大小,并提供了可识别各个身体部位的分割图——将怪物分成爪子、鼻子、腿等解剖部分。

经过模型训练后,模型的任务是根据艺术家提供的轮廓生成多物种的嵌合体。然后将性能最好的模型合并到Chimera Painter中。

看到这里,你是否也跃跃欲试呢?快快点击下方链接创建自己的小怪兽吧~

https://storage.googleapis.com/chimera-painter/index.html

相关文章
|
4月前
|
机器学习/深度学习 计算机视觉
ICML 2024:人物交互图像,现在更懂你的提示词了,北大推出基于语义感知的人物交互图像生成框架
【8月更文挑战第30天】在计算机视觉和机器学习领域,人物交互图像生成一直充满挑战。然而,北京大学团队在ICML 2024上提出的SA-HOI(Semantic-Aware Human Object Interaction)框架带来了新突破。该框架通过评估人物姿态质量和检测交互边界区域,结合去噪与细化技术,显著提升了生成图像的合理性与质量。广泛实验表明,SA-HOI在多样化和细粒度的人物交互类别上表现出色,为该领域提供了新的解决方案。尽管存在数据集质量和计算复杂度等局限,未来仍有很大改进空间和应用潜力。
62 3
|
4月前
|
算法
ECCV 2024:盲视频去闪烁通用方法BlazeBVD来了,美图&国科大联合提出
【8月更文挑战第15天】随着多媒体的兴起,视频成为信息传播的关键媒介,但视频中的闪烁问题影响观看体验。美图与中国科学院大学联合研发的BlazeBVD算法,采用直方图辅助方法简化学习过程,提高了视频去闪烁的质量与速度。该算法通过2D网络恢复纹理,3D网络修正时间一致性,实现了高效能与高保真度。实验结果显示,BlazeBVD在多种视频类型上表现优秀,推理速度提升显著。尽管如此,算法在处理局部闪烁和复杂场景时仍存在局限性,未来有进一步优化的空间。[论文链接](https://arxiv.org/pdf/2403.06243v1)
77 1
|
7月前
|
人工智能 计算机视觉
CVPR 2024:跳舞时飞扬的裙摆,AI也能高度还原了,南洋理工提出动态人体渲染新范式
【5月更文挑战第6天】南洋理工大学研究团队在CVPR 2024会议上提出SurMo,一种动态人体渲染新方法,能高度还原视频中的人物动作和细节,如飞扬的裙摆。SurMo通过4D运动建模,结合表面运动编码、物理运动解码和4D外观解码,实现动态图像的精确合成。尽管面临复杂动作捕捉和计算资源需求的挑战,SurMo在动态人体渲染任务上表现出色,展现了表面基运动三角平面的强大表达能力。[论文链接](https://arxiv.org/pdf/2404.01225.pdf)
167 1
|
机器学习/深度学习 网络架构
多模态图像合成与编辑这么火,马普所、南洋理工等出了份详细综述
多模态图像合成与编辑这么火,马普所、南洋理工等出了份详细综述
113 0
|
机器学习/深度学习 算法 机器人
CMU发表新型灵巧机器人算法,准确学习日常家具的操纵方法
CMU发表新型灵巧机器人算法,准确学习日常家具的操纵方法
130 0
|
机器学习/深度学习 人工智能 算法
DeepMind攻克50年数学难题!AlphaZero史上最快矩阵乘法算法登Nature封面(1)
DeepMind攻克50年数学难题!AlphaZero史上最快矩阵乘法算法登Nature封面
283 0
|
机器学习/深度学习 人工智能 算法
DeepMind攻克50年数学难题!AlphaZero史上最快矩阵乘法算法登Nature封面(2)
DeepMind攻克50年数学难题!AlphaZero史上最快矩阵乘法算法登Nature封面
166 0
|
程序员 C语言
井字棋版本1.0(对抗人工智障)
井字棋版本1.0(对抗人工智障)
井字棋版本1.0(对抗人工智障)
|
机器学习/深度学习 计算机视觉
英伟达的实习生提出零样本风格迁移:多模态CLIP玩出花,只用文本就能干CV的活!
零样本的风格迁移听说过没有?英伟达一个实习生小哥集文本CLIP和图像生成StyleGAN于一身,只需要输入几个单词就可以完成你想要的风格迁移效果!再也不用为了风格迁移找数据啦!
305 0
英伟达的实习生提出零样本风格迁移:多模态CLIP玩出花,只用文本就能干CV的活!