阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流(中)

简介: 阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流

接上篇:https://developer.aliyun.com/article/1224763?spm=a2c6h.13148508.setting.24.1b214f0eEgbVNQ


二、创业伙伴可以借力的2项典型能力

能力一:座舱数字人

 

image.png

 

元宇宙、Web 3 概念愈发普及,应用到座舱场景下,可以实现座舱数字人。

 

基于天猫精灵的智能交互 OS 系统,使用最新的自然对话技术与多模交互方案,可快速实现落地,可以让第三方应用网快速接入。

 

座舱数字人具有以下几个特点:

● 支持 2D、3D 的形象快速定制。车主拍照上传即可快速生成3D形象(技术 要求高,需要深度大模型的训练),实现接近真人的个性化定制。可以选择发型、服装配饰,也可以针对脸部的细部比如鼻子、嘴巴等做调节。提供了写实风格形象以及卡通风格形象。

● 定制与车主真人接近的音色。

● 根据场景列表或设定的触发条件,自动与用户进行交互,使用体验更智能。利用音箱底层的 AI 交互大脑能力,自然对话时,音箱会与车主聊天或主动提问,背后是一套更复杂的平台架构提供支撑,可以定制个性化的应用

● 具备答疑解惑、娱乐活动、情感陪伴等能力。我们提供了非常强大的开发平台,开发者、创业者可以使用低代码的模式快速搭建应用。

● 支持空中3D 立体全息投影(裸眼3D),可以快速投放出数字的形象,实现更震撼的交互体验。

 

image.png

我们提供了纯文本/语音驱动数字人以及主动交互数字人。

 

纯文本/语音驱动数字人:输入文本或语音,即可驱动数字人面部的表情与拟人化的音色。同时也可以搭配脸部动作、手势等,人是视觉动物,交谈时搭配合适的动作可以使得体验更好。适用于语音内容视觉化、车载语音应用、短视频内容制作、线上电商品介绍、教育行业内容制作、线下场景内容宣传等。

 

主动交互数字人:相比前者,它更“聪明灵动”。背后连接了人工智能天猫精灵大脑,可以通过 NLU 的语义理解与用户自然对话。也可以搭配触发条件,比如摄像头识别车主上车后发出互动问候或提议一起玩游戏等,更像一个助手或朋友。适用于线上线下互动类、线下元宇宙、酒店行业的 AI 服务员、线上虚拟主播(设定好所有内容后即可实现线上 24 小时卖货)等。

 

image.png

 

座舱环境下,屏幕大小、音箱、灯光配置等均不同于 PC和手机,如果直接照搬PC或手机的游戏至座舱中,无法实现很好的用户体验。因此,我们要打造基于座舱的原生游戏,基于 AI 能力,通过人脸、肢体、手势、多模操控等更适合座舱的方式充分调动座舱内的音效、灯光,实现沉浸式体验。

 

座舱游戏最大的两个特点为:

 

● 多模交互。可以实现流畅的隔空操作,区别于外接操作手柄或触屏操作。

● 沉浸式体验。座舱是天然的游戏空间,配合座椅沙发、环绕声、氛围灯光、座椅以及超大屏幕,打造最佳的沉浸式体验。

 

 

image.png

 

那么,为什么座舱游戏已经成为一个趋势?

 

● 如今的车已经不是传统意义上的车,新能源车更像是一台计算机,类似于 iPhone 与诺基亚的区别。

● 年轻人买车更关注科技感与酷。买车送游戏座舱是一件很年轻很酷的事。

● 座舱天然具备绝佳的游戏空间条件。

● 从车厂角度,车辆被售出后,可以在增加有限成本的情况下,获得更多软件式的营收,同时也能为客户带来十分客观的体验感增强。

image.png

 

年轻人或家庭两大购车群体的使用场景主要包括车里午休、车里陪娃、车里放松、车里休闲。

对于车厂来说,座舱游戏具有三个非常重要的价值:

● 作为新车卖点,拉动销售。

● 车主人群运营。通过游戏来做车主运营,比如级别养成、分享 、排名、积分等,打造用户粘性。同时,可以做弱联机的游戏,加入社交元素,比如排名、交换、分享等,提升品牌粘性。

● 实现软件上的营收。

 

image.png

座舱游戏为什么需要原生?

 

首先,车辆的移动性无法百分百保证网络的稳定性,而网游对网络要求高,因此不适合照搬上车。

其次,受限于车机的硬件性能, 3A 大作不太适合照搬上车。

另外,座舱屏幕尺寸过大,手游不适合直接上车,体验感不像玩游戏,更像是弹钢琴。

最后,大幅身体互动类游戏也不适合上车。

 

因此,座舱需要原生游戏,通过AI+游戏+座舱为用车人员提供沉浸式体验。

 

image.png

 

阿里云的优势在于全套的 AI 参数以及边缘计算,支持专业的游戏厂商,创业伙伴很行业、懂用户,在游戏策划或相关技能应用方面有很深的积累。

 

我们可以将双方的技术优势联合起来,提供给主机厂,使游戏厂商和主机厂快速适配。

image.png

 

座舱游戏分为单人单机、多人单机以及多人多机。整套游戏底层共用计算单元,共用 AI 引擎,上层游戏独立分布,且多屏幕场景下支持多人同时独立游戏。车企希望为用户提供更丰富的娱乐,用户在车上多花时间,有利于车企后续做后向的运营。

 

image.png

 

我们欢迎各类创业者或开发者一起合作。比如游戏类开发者以及儿童益智类开发者可以与我们合作,将现有的点击类或触摸类的交互变为多模交互;比如生活服务的开发者注重场景化、智能化,希望在不同的场景之下更好地理解用户、感知用户,为其提供相关的服务,可以与我们合作,做出差异化;比如音频内容开发者可以与我们合作,从纯语音升级为个性化数字人播报。

 

我们可以为合作伙伴带来交互方式的升级(AI 交互能力支持)以及销售渠道的拓展。

 

AI 交互能力支持分为三类:

● 智能语音交互:包括ASR 端上的自动语音识别、NLU、个性化TTS音色、说话人检测、多模态主人识别以及说话人脸部朝向检测。车辆是一个密闭空间,多人同时说话时需要能够判断响应谁的指令。

● 座舱智能视觉交互:人脸属性、人形检测、手势、视线动态、坐标检测、疲劳驾驶、拨打电话检测等。比如可以自动提取眼睛朝向,通过眼球控制游戏,比如儿童模式可以帮助车主在行驶过程进行儿童看护或与儿童互动,车主得以专心驾驶。

● 车载数字人:包括文本/语音驱动以及主动交互两大类。

 

另外,我们会在商务或销售资源方面为合作伙伴提供支持,合作伙伴无需投入大量精力与资源维护搭建商务关系,无需耗费大量精力做项目的对接。阿里云与国内外车厂都有大量合作,可以帮助合作伙伴快速实现对接。


接下篇:https://developer.aliyun.com/article/1224758?groupCode=chuang

相关文章
|
11月前
|
云安全 人工智能 安全
Dify平台集成阿里云AI安全护栏,构建AI Runtime安全防线
阿里云 AI 安全护栏加入Dify平台,打造可信赖的 AI
4263 166
|
11月前
|
人工智能 vr&ar UED
获奖公布|第十九届"挑战杯"竞赛2025年度中国青年科技创新"揭榜挂帅"擂台赛阿里云“AI技术助力乡村振兴”专题赛拟授奖名单公示
获奖公布|第十九届"挑战杯"竞赛2025年度中国青年科技创新"揭榜挂帅"擂台赛阿里云“AI技术助力乡村振兴”专题赛拟授奖名单公示
|
11月前
|
机器学习/深度学习 人工智能 Serverless
吉利汽车携手阿里云函数计算,打造新一代 AI 座舱推理引擎
当前吉利汽车研究院人工智能团队承担了吉利汽车座舱 AI 智能化的方案建设,在和阿里云的合作中,基于星睿智算中心 2.0 的 23.5EFLOPS 强大算力,构建 AI 混合云架构,面向百万级用户的实时推理计算引入阿里云函数计算的 Serverless GPU 算力集群,共同为智能座舱的交互和娱乐功能提供大模型推理业务服务,涵盖的场景如针对模糊指令的复杂意图解析、文生图、情感 TTS 等。
|
11月前
|
机器学习/深度学习 人工智能 算法
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
NBA中国与阿里云达成合作,首发360°实时回放技术,融合AI视觉引擎,实现多视角、低延时、沉浸式观赛新体验,重新定义体育赛事观看方式。
1642 0
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
|
11月前
|
存储 人工智能 OLAP
AI Agent越用越笨?阿里云AnalyticDB「AI上下文工程」一招破解!
AI上下文工程是优化大模型交互的系统化框架,通过管理指令、记忆、知识库等上下文要素,解决信息缺失、长度溢出与上下文失效等问题。依托AnalyticDB等技术,实现上下文的采集、存储、组装与调度,提升AI Agent的准确性与协同效率,助力企业构建高效、稳定的智能应用。
|
人工智能 物联网
2亿IoT生态、与人教社合作AI教育 天猫精灵平台布局进入收获期
9月25日,阿里人工智能实验室在云栖大会上宣布,目前天猫精灵已经接入了超过 660多家IoT平台,覆盖超过60个品类,900多个品牌,支持3600多型号,2亿可连接设备,成为最大的IoT生态开放平台。
|
11月前
|
消息中间件 人工智能 安全
云原生进化论:加速构建 AI 应用
本文将和大家分享过去一年在支持企业构建 AI 应用过程的一些实践和思考。
2518 99
|
12月前
|
人工智能 安全 中间件
阿里云 AI 中间件重磅发布,打通 AI 应用落地“最后一公里”
9 月 26 日,2025 云栖大会 AI 中间件:AI 时代的中间件技术演进与创新实践论坛上,阿里云智能集团资深技术专家林清山发表主题演讲《未来已来:下一代 AI 中间件重磅发布,解锁 AI 应用架构新范式》,重磅发布阿里云 AI 中间件,提供面向分布式多 Agent 架构的基座,包括:AgentScope-Java(兼容 Spring AI Alibaba 生态),AI MQ(基于Apache RocketMQ 的 AI 能力升级),AI 网关 Higress,AI 注册与配置中心 Nacos,以及覆盖模型与算力的 AI 可观测体系。
1958 90
|
11月前
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
1023 30
|
11月前
|
设计模式 人工智能 自然语言处理
3个月圈粉百万,这个AI应用在海外火了
不知道大家还记不记得,我之前推荐过一个叫 Agnes 的 AI 应用,也是当时在 WAIC 了解到的。
1002 2