开发者社区> 问答> 正文

虚拟数字人开放平台有具体的介绍么?

虚拟数字人开放平台有具体的介绍么?

展开
收起
真的很搞笑 2024-08-01 15:10:54 32 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    虚拟数字人开放平台,是由阿里云所提供的数字人服务,它集成了自然语言处理、图形图像、语音等算法能力,提供给客户标准的 PaaS 接口与后台运营工具,方便客户将数字人能力集成进不同的终端与场景。主要面对的行业包括新零售、政务、金融、运营商、传媒等,场景包括数字人大屏、数字人直播、数字人客服、数字人长/短视频、数字人助理等。
    https://help.aliyun.com/document_detail/392353.htm?spm=a2c4g.11174283.0.0.df60406cXJkach
    image.png

    2024-08-02 10:44:29
    赞同 3 展开评论 打赏
  • 虚拟数字人开放平台
    一、定义与产品架构
    定义: 虚拟数字人开放平台是阿里云提供的集成了自然语言处理、图形图像、语音等算法能力的数字人服务。该平台面向新零售、政务、金融、运营商、传媒等行业,适用于数字人大屏、数字人直播、数字人客服、数字人长/短视频、数字人助理等多种场景。它通过提供标准的PaaS接口与后台运营工具,助力客户将数字人能力无缝集成到不同终端与场景中。 产品架构: 虚拟数字人开放平台支持3D和2D两种数字人形式。其中,3D数字人由三维建模制作,而2D数字人则源自真人照片或视频制作。平台的核心产品能力包括数字人流媒体、数字人视频合成和数字人资产库,旨在帮助开发者快速构建各类数字人应用。
    二、产品能力概述 1. 3D数字人流媒体 - 功能:实时驱动3D数字人进行文本播报,支持通过API接收文本数据,处理成数字人的声音、表情、口型、动作,并通过流媒体技术合成视频流输出至阿里云RTC或客户指定的RTMP流媒体服务器。 - 模板:提供播报数字人、互动数字人、推流数字人三种模板,分别适用于数字人资讯播报、数字人客服助理、数字人虚拟直播等场景。互动数字人需结合智能对话机器人使用。
    2. 数字人视频合成

    • 功能:通过接口传递数字人播报文本,合成数字人视频及字幕下载地址,支持调节数字人机位和选择视频输出格式。
    • 交互形式:支持API接口调用(适于批量制作或构建自有SaaS应用)和SaaS界面交互(提供编辑工具,自由选择数字人形象、声音、布局、字幕等,生成视频)。
      3. 数字人资产库
    • 功能:提供3D/2D数字人形象的预览、捏脸、换装、声音切换等编辑管理能力。
    • 资源:官方提供丰富的3D/2D数字人形象,支持预览、捏脸、换装、声音切换(2D数字人暂不支持编辑)。若需个性化形象,可通过数字造星服务导入符合平台规范的3D形象。资产库中的所有形象可直接应用于平台各项产品能力。
      三、控制台功能 主模块 | 子模块 | 模块内容 -|-|- 应用中心 | 视频创作 | 提供Web操作界面,实现“输入文本,驱动数字人生成视频并下载”的功能。 开发者中心 | 项目管理 | 设置应用名称、关联实例,配置数字人形象、字幕开关、页面布局等,提供开发者信息。 实例管理 | 管理阿里云账号下的实例,如续费、退订、升降配等。 数字人卡片 | 模板管理 & 卡片管理 | 支持在数字人播报时加入VAML协议参数,实现图文及选项卡片效果。 资产中心 | 2D数字人资产 | 管理2D数字人,设置角色名称、描述、语音,支持增删改查。 3D数字人资产 | 管理3D数字人,设置角色名称、描述、语音,支持发型、妆容、服装、背景设置,支持增删改查。
      四、应用场景
    • 资讯播报:通过PaaS接口传递播报文本,获取数字人播报视频流,结合RTC拉流实现数字人资讯播报。
      • 虚拟直播:通过RTMP协议将数字人流媒体推送到直播平台,实现数字人开播。互动、问答需开发者自行实现。 - 客服助理:结合数字人流媒体服务与智能对话机器人,实现与数字人的自然语言互动。
        五、产品优势
    1. 简单高效的PaaS服务接口:客户只需调用标准Text To Stream接口,无需关注底层驱动实现。
    2. 完善的控制台运营工具:支持自定义数字人声音、形象,内置多种装扮,便于创建不同风格形象。
    3. 语音、视觉多模态交互:毫秒级实时处理语音流、视频流,实现数字人多维度、立体交互。
    4. 内置资产:支持3D卡通、美型、2D真人形象,以及普通话、方言等发音人。

    5. 高内聚标准接口:封装数字人渲染、驱动、构建、互动能力,降低研发周期与成本。

    6. 多元化媒体服务:提供RTC、RTMP、视频合成等服务。
    7. 自助扩缩容:支持自助升降配、弹性、停复机等按量计费能力。
      六、使用准备与流程 准备工作
    • 申请阿里云账号:如无账号,需先注册申请。
    • 配置RAM用户权限:为确保安全、精细的权限管理,可创建并配置RAM用户权限。
      后续步骤
    • 开通服务:完成账号准备后,按照官方文档指引开通虚拟数字人开放平台服务。
    • 创建并配置数字人应用:参照平台文档进行数字人应用的创建与配置。 综上所述,虚拟数字人开放平台凭借其强大的数字人驱动能力、丰富的资产库、便捷的控制台工具以及灵活的媒体服务,为企业和个人开发者提供了全方位的数字人应用开发解决方案。用户只需遵循上述使用流程,即可轻松接入并利用平台能力,实现各类数字人应用场景的快速落地。官网虚拟数字人产品:https://help.aliyun.com/zh/avatar/avatar/product-overview/what-is-dvh-open-platform?
    2024-08-01 15:55:42
    赞同 2 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
虚拟数字人视频创作产品分享 立即下载
虚拟数字人开放平台产品分享 立即下载
低代码开发师(初级)实战教程 立即下载