Make-It-Animatable:中科大联合腾讯推出的自动生成即时动画准备资产

本文涉及的产品
视觉智能开放平台,图像资源包5000点
视觉智能开放平台,分割抠图1万点
视觉智能开放平台,视频资源包5000点
简介: Make-It-Animatable是由中国科学技术大学和腾讯联合推出的数据驱动框架,能够在不到一秒内将任何3D人形模型转换为可用于动画的状态。该框架支持多种3D数据格式,并采用从粗到细的表示策略和结构感知建模,显著提升了动画准备的质量和速度。

❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦


🚀 快速阅读

  1. 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态。
  2. 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换。
  3. 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。

正文

Make-It-Animatable 是什么

公众号: 蚝油菜花 - Make-It-Animatable

Make-It-Animatable是由中国科学技术大学和腾讯PCG共同开发的数据驱动框架。该框架能够在不到一秒的时间内,将任何3D人形模型准备好进行角色动画状态,无论其形状和姿势如何。它基于生成高质量的混合权重、骨骼和姿势变换,支持多种3D表示,包括网格和3D高斯斑点。

Make-It-Animatable采用了从粗到细的表示和结构感知建模策略,确保了模型的准确性和鲁棒性,甚至适用于具有非标准骨架结构的角色。与现有方法相比,Make-It-Animatable在质量和速度上都有显著提升。

Make-It-Animatable 的主要功能

  • 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态,无论其形状和姿势。
  • 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换,为动画制作提供必要的数据。
  • 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。
  • 精细到粗糙的多级表示:采用从精细到粗糙的多级表示方法,提高模型关键区域的细节捕捉能力。
  • 结构感知建模:识别并适应非标准骨架结构,提高模型的适应性和准确性。

Make-It-Animatable 的技术原理

  • 基于粒子的形状自编码器:基于粒子的自编码器技术编码和解码3D形状,支持多种3D表示。
  • 从粗到细的表示策略:先进行粗略的形状和关节位置预测,然后细化预测提高精确度。
  • 结构感知的骨骼建模:基于考虑骨骼的拓扑结构,提高骨骼预测的准确性,尤其是在复杂的骨骼结构中。
  • 混合权重和骨骼位置预测:用深度学习技术预测每个顶点的混合权重和骨骼位置,实现精确的蒙皮。
  • 姿势变换的预测:预测模型从当前姿势到标准休息姿势的变换,以便应用各种动画。

资源


❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦

相关文章
|
2月前
|
数据采集 API 决策智能
华为诺亚联合中科大发布工具调用模型ToolACE,效果持平GPT-4获开源第一
 【10月更文挑战第10天】华为诺亚方舟实验室与中国科学技术大学合作推出ToolACE,一种自进化合成过程的工具调用模型。ToolACE通过多智能体交互和双重验证系统生成准确、复杂、多样化的工具学习数据,显著提升大型语言模型(LLM)的功能调用能力。实验结果显示,使用ToolACE数据训练的80亿参数模型性能媲美GPT-4,在伯克利功能调用排行榜上获得开源第一。
72 4
|
3月前
|
Serverless
解决方案评测|函数计算驱动多媒体文件处理获奖名单公布
解决方案评测|函数计算驱动多媒体文件处理获奖名单公布!!
|
7月前
|
小程序 安全 物联网
社区每周丨通过模板开发小程序文档更新及蚂蚁数据安全星计划推出(7.17-7.21)
社区每周丨通过模板开发小程序文档更新及蚂蚁数据安全星计划推出(7.17-7.21)
69 11
|
人工智能 自然语言处理 测试技术
国内首个!Postcat 上线 AI 生成 API 功能,写接口动几下就行!
今天我们很高兴的向大家宣布,Postcat.com 正式上线 AI 生成 API 的功能,并且是国内首个结合AI + API的产品!
|
自然语言处理 搜索推荐 API
160亿参数,新增多项能力,复旦MOSS开源了
160亿参数,新增多项能力,复旦MOSS开源了
102 0
|
边缘计算 人工智能 运维
阿里云AIoT这款爆品打几分?第三方媒体给出了一份评测报告
如今已经是云计算的时代,各种功能和应用都在向云上迁移。不过云端的算力虽然很强大,但是受限于网络带宽等因素,在云端协同的模式下有时效果不够好,因此近年来很多厂商也提出了边缘计算的概念,意在解放云端协同的局限性,将应用程序放在边缘侧,产生更快的网络服务响应。
258 0
阿里云AIoT这款爆品打几分?第三方媒体给出了一份评测报告
|
Web App开发 机器学习/深度学习 人机交互
打开摄像头,2D插画实时变动画,中国程序媛出品,Demo在线可玩
画一只狸(jian)克(shang),并让它拍摄一个「催款」的特写,需要几步?
新版科技发展资金管理办法发布:支持地方基础研究和科技创新
10月14日,财政部、科技部联合发布《中央引导地方科技发展资金管理办法》修订版,引导基础研究区域布局,推进区域科技创新能力提升。 《办法》鼓励地方综合采用直接补助、后补助、以奖代补等多种投入方式,支持自由探索类基础研究、科技创新基地建设和区域创新体系建设...
科技创新平台年报系统——项目目标文档
系统目标模块        1     系统一共有四类用户,分别是,河北省科学技术厅,重点实验室、工程技术研究中心、产业技术研究院三类用户,依托单位,系统管理员,每一类用户有不同的目标。 用户 目标 河北省科学技术厅 能高效的完成统计表的审核,实时显示提交数目。
944 0

热门文章

最新文章