Make-It-Animatable:中科大联合腾讯推出的自动生成即时动画准备资产

简介: Make-It-Animatable是由中国科学技术大学和腾讯联合推出的数据驱动框架,能够在不到一秒内将任何3D人形模型转换为可用于动画的状态。该框架支持多种3D数据格式,并采用从粗到细的表示策略和结构感知建模,显著提升了动画准备的质量和速度。

❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦


🚀 快速阅读

  1. 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态。
  2. 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换。
  3. 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。

正文

Make-It-Animatable 是什么

公众号: 蚝油菜花 - Make-It-Animatable

Make-It-Animatable是由中国科学技术大学和腾讯PCG共同开发的数据驱动框架。该框架能够在不到一秒的时间内,将任何3D人形模型准备好进行角色动画状态,无论其形状和姿势如何。它基于生成高质量的混合权重、骨骼和姿势变换,支持多种3D表示,包括网格和3D高斯斑点。

Make-It-Animatable采用了从粗到细的表示和结构感知建模策略,确保了模型的准确性和鲁棒性,甚至适用于具有非标准骨架结构的角色。与现有方法相比,Make-It-Animatable在质量和速度上都有显著提升。

Make-It-Animatable 的主要功能

  • 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态,无论其形状和姿势。
  • 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换,为动画制作提供必要的数据。
  • 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。
  • 精细到粗糙的多级表示:采用从精细到粗糙的多级表示方法,提高模型关键区域的细节捕捉能力。
  • 结构感知建模:识别并适应非标准骨架结构,提高模型的适应性和准确性。

Make-It-Animatable 的技术原理

  • 基于粒子的形状自编码器:基于粒子的自编码器技术编码和解码3D形状,支持多种3D表示。
  • 从粗到细的表示策略:先进行粗略的形状和关节位置预测,然后细化预测提高精确度。
  • 结构感知的骨骼建模:基于考虑骨骼的拓扑结构,提高骨骼预测的准确性,尤其是在复杂的骨骼结构中。
  • 混合权重和骨骼位置预测:用深度学习技术预测每个顶点的混合权重和骨骼位置,实现精确的蒙皮。
  • 姿势变换的预测:预测模型从当前姿势到标准休息姿势的变换,以便应用各种动画。

资源


❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦

相关文章
|
机器学习/深度学习 人工智能 自然语言处理
LLM主流开源代表模型(一)
随着ChatGPT迅速火爆,引发了大模型的时代变革,国内外各大公司也快速跟进生成式AI市场,近百款大模型发布及应用。
|
9月前
|
人工智能 自然语言处理 vr&ar
通义首个音频生成模型 ThinkSound 开源,你的专业音效师
通义实验室推出首个音频生成模型ThinkSound,突破传统视频到音频生成技术局限,首次将思维链(CoT)应用于音频生成领域,实现高保真、强同步的空间音频生成。基于自研AudioCoT数据集,结合多模态大语言模型与统一音频生成模型,支持交互式编辑,显著提升音画匹配度与时序一致性。代码已开源,助力游戏、VR、AR等场景创新应用。
2059 4
|
9月前
|
编解码 物联网 开发者
FLUX.1 Kontext 的全生态教程来啦!AIGC专区在线试玩!
Flux.1 Kontext [dev] 开源模型大家都用上了吗?小编汇总了3个使用教程,打包送上!
3289 1
|
存储 Kubernetes 数据管理
Fluid 携手 Vineyard,打造 Kubernetes 上的高效中间数据管理
本文阐述了如何利用 Fluid 和 Vineyard 在 Kubernetes 上优化中间数据管理,解决开发效率、成本和性能问题。 Fluid 提供数据集编排,使数据科学家能用 Python 构建云原生工作流,而 Vineyard 通过内存映射实现零拷贝数据共享,提高效率。两者结合,通过数据亲和性调度减少网络开销,提升端到端性能。 同时通过一个真实事例介绍了安装 Fluid、配置数据与任务调度及使用 Vineyard 运行线性回归模型的步骤,展示了在 Kubernetes 上实现高效数据管理的实践方法。未来,项目将扩展至 AIGC 模型加速和 Serverless 场景。
476 0
|
XML 数据库 Android开发
详细聊聊Fragment的实现原理
详细聊聊Fragment的实现原理
|
算法 数据可视化 机器人
Nvidia Isaac Sim搭建仿真环境 入门教程 2024(4)
本文是Nvidia Isaac Sim搭建仿真环境的入门教程,详细讲解了如何在Isaac Sim中创建物理场景、添加地面和光照、创建和配置仿真对象的物理属性、使用USD文件进行仿真场景的保存和引用,以及个人练习和相关物理概念的介绍。
4809 0
buuctf-misc-26.后门查杀
buuctf-misc-26.后门查杀
|
网络协议 NoSQL 网络安全
CTFHUB SSRF 【全】
CTFHUB SSRF 【全】
642 0
|
安全 网络安全 数据安全/隐私保护
|
存储 编解码 安全
冥王峡谷安装steamos踩坑记录
记录冥王峡谷安装第三方steamos-holoiso时遇到的一些问题,其它玩家可参考
3855 0

热门文章

最新文章