阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流(中)

简介: 阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流
+关注继续查看

接上篇:https://developer.aliyun.com/article/1224763?spm=a2c6h.13148508.setting.24.1b214f0eEgbVNQ


二、创业伙伴可以借力的2项典型能力

能力一:座舱数字人

 

image.png

 

元宇宙Web 3 概念愈发普及,应用到座舱场景下,可以实现座舱数字人。

 

基于天猫精灵的智能交互 OS 系统,使用最新的自然对话技术多模交互方案,快速实现落地,可以让第三方应用网快速接入。

 

座舱数字人具有以下几个特点:

● 支持 2D3D 的形象快速定制。车主拍照上传即可快速生成3D形象(技术 要求高,需要深度大模型的训练),实现接近真人的个性化定制。可以选择发型服装配饰,也可以针对脸部的细部比如鼻子、嘴巴做调节。提供了写实风格形象以及卡通风格形象

● 定制与车主真人接近的音色。

● 根据场景列表或设定的触发条件,自动用户进行交互,使体验更智能。利用音箱底层的 AI 交互大脑能力,自然对话音箱车主聊天主动提问,背后是一套更复杂的平台架构提供支撑,可以定制个性化的应用

● 具备答疑解惑、娱乐活动、情感陪伴能力。我们提供了非常强大的开发平台,开发者、创业者可以使用低代码的模式快速搭建应用。

● 支持空中3D 立体全息投影裸眼3D,可以快速投放出数字的形象,实现更震撼的交互体验

 

image.png

我们提供了纯文本/语音驱动数字人以及主动交互数字人。

 

纯文本/语音驱动数字人:输入文本或语音即可驱动数字人面部的表情拟人化的音色。同时也可以搭配脸部动作、手势人是视觉动物,交谈时搭配合适的动作可以使得体验更好。适用于语音内容视觉化、车载语音应用、短视频内容制作、线上电商品介绍教育行业内容制作线下场景内容宣传

 

主动交互数字人:相比前者,它更“聪明灵动”。背后连接了人工智能天猫精灵大脑可以通过 NLU 的语义理解用户自然对话。也可以搭配触发条件比如摄像头识别车主上车后发出互动问候或提议一起玩游戏等,更像一个助手或朋友适用于线上线下互动类线下元宇宙酒店行业的 AI 服务员线上虚拟主播设定好所有内容后即可实现线上 24 小时卖货

 

image.png

 

座舱环境下,屏幕大小音箱灯光配置不同于 PC手机如果直接照搬PC或手机的游戏至座舱中,无法实现很好的用户体验。因此我们要打造基于座舱的原生游戏基于 AI 能力,通过人脸、肢体手势多模操控更适合座舱的方式充分调动座舱的音效、灯光,实现沉浸式体验。

 

座舱游戏最大的两个特点为:

 

● 多模交互。可以实现流畅的隔空操作,区别于外接操作手柄或触屏操作

● 沉浸式体验。座舱是天然的游戏空间,配合座椅沙发、环绕声、氛围灯光座椅以及超大屏幕,打造最佳的沉浸式体验。

 

 

image.png

 

那么,为什么座舱游戏已经成为一个趋势?

 

● 如今的车已经不是传统意义上的车新能源车更是一台计算机,类似于 iPhone 诺基亚的区别。

● 年轻人买车关注科技感酷。买车送游戏座舱是一件很年轻很酷的事。

● 座舱天然具备绝佳的游戏空间条件。

● 从车厂角度,车辆被售出后可以在增加有限成本的情况下,获得更多软件式的营收,同时也能为客户带来十分客观的体验感增强。

image.png

 

年轻人家庭两大购车群体的使用场景主要包括车里午休、车里陪娃、车里放松、车里休闲。

对于车厂说,座舱游戏具有三个非常重要的价值

● 作为新车卖点,拉动销售

● 车主人群运营。通过游戏来做车主运营,比如级别养成、分享 、排名、积分等,打造用户粘性。同时,可以做弱联机的游戏,加入社交元素,比如排名、交换、分享等,提升品牌粘性。

● 实现软件上的营收

 

image.png

座舱游戏为什么需要原生

 

首先,车辆的移动性无法百分百保证网络的稳定性,而网游对网络要求高,因此不适合照搬上车

其次,受限于车机的硬件性能, 3A 大作不太适合照搬上车。

另外,座舱屏幕尺寸过大,手游不适合直接上车,体验感不像玩游戏,更像是弹钢琴

最后,大幅身体互动类游戏也适合上车

 

因此,座舱需要原生游戏,通过AI+游戏+座舱为用车人员提供沉浸式体验。

 

image.png

 

阿里云的优势在于全套的 AI 参数以及边缘计算,支持专业的游戏厂商,创业伙伴很行业懂用户,在游戏策划相关技能应用方面有很深的积累。

 

我们可以双方的技术优势联合起来提供给主机厂,使游戏厂商主机厂快速适配。

image.png

 

座舱游戏分为单人单机、多人单机以及多人多机。整套游戏底层计算单元,共用 AI 引擎上层游戏独立分布且多屏幕场景下支持多人同时独立游戏车企希望为用户提供更丰富的娱乐用户在车上多花时间,有利于车企后续做后向的运营。

 

image.png

 

我们欢迎各类创业者开发者一起合作。比如游戏类开发者以及儿童益智类开发者可以与我们合作,现有的点击类触摸类的交互变为多模交互比如生活服务的开发者注重场景化智能化,希望在不同的场景之下更好理解用户感知用户,为其提供相关的服务可以与我们合作,做出差异化比如音频内容开发者可以与我们合作,从纯语音升级为个性化数字人播报

 

我们可以合作伙伴带来交互方式升级AI 交互能力支持以及销售渠道的拓展。

 

AI 交互能力支持分为三类

● 智能语音交互:包括ASR 端上的自动语音识别、NLU、个性化TTS音色、说话人检测、多模态主人识别以及说话人脸部朝向检测。车辆是一个密闭空间,多人同时说话时需要能够判断响应谁的指令。

● 座舱智能视觉交互:人脸属性、人形检测手势视线动态坐标检测、疲劳驾驶、拨打电话检测等。比如可以自动提取眼睛朝向,通过眼球控制游戏,比如儿童模式可以帮助车主在行驶过程进行儿童看护与儿童互动,车主得以专心驾驶

● 车载数字人:包括文本/语音驱动以及主动交互两大类

 

另外,我们会在商务销售资源方面为合作伙伴提供支持合作伙伴无需投入大量精力资源维护搭建商务关系无需耗费大量精力做项目的对接。阿里云与国内外车厂都有大量合作,可以帮助合作伙伴快速实现对接。


接下篇:https://developer.aliyun.com/article/1224758?groupCode=chuang

相关文章
|
2月前
|
云安全 数据采集 安全
|
2月前
|
存储 人工智能 大数据
中国中医科学院与阿里云达成合作
中国中医科学院与阿里云达成合作
61 0
|
2月前
|
物联网
阿里云与长盈科技达成全面合作
阿里云与长盈科技达成全面合作
60 0
|
2月前
|
人工智能 弹性计算 安全
巨人网络与阿里云达成全面合作!
巨人网络与阿里云达成全面合作!
50 0
|
2月前
|
人工智能 大数据 云计算
中国地震局地球物理研究所,与阿里云达成全面合作!
中国地震局地球物理研究所,与阿里云达成全面合作!
43 0
|
2月前
|
城市大脑 人工智能 算法
共建先进计算中心,达州市与阿里云达成合作
共建先进计算中心,达州市与阿里云达成合作
48 0
|
3月前
|
人工智能 物联网 大数据
阿里云与长盈科技达成全面合作
2023年7月26 日,阿里云与长盈科技在广州签署了全面合作协议,长盈科技入驻阿里云集成伙伴,双方发布智慧环保联合解决方案。
|
3月前
|
人工智能 达摩院 安全
巨人网络与阿里云签署合作备忘录,建立 “游戏 + AI”全面合作
阿里云达摩院也将为双方合作提供深度技术支持。目前国内最大、由阿里云达摩院主导维护的 AI 模型开源社区魔搭社区 ModelScope ,将结合巨人网络业务需求场景,进行 AI + 创作工具、游戏 + AI 玩法的场景挖掘,持续迭代升级模型能力,提升产品性能。
|
4月前
|
存储 边缘计算 人工智能
莲子数据与阿里云开源PolarDB合作助力制造业数字化转型
因云而聚,携手共赢,莲子数据与众多科技公司一起成为PolarDB 开源社区的生态成员,作为PolarDB 开源数据库的生态合作企业,莲子数据库一体机结合PolarDB 的生态可以赋能广大工业企业,近期在工业数字化应用的一个实际案例就生动体现了软硬深度结合的价值。
热门文章
最新文章
推荐文章
更多