阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流(中)

简介: 阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流

接上篇:https://developer.aliyun.com/article/1224763?spm=a2c6h.13148508.setting.24.1b214f0eEgbVNQ


二、创业伙伴可以借力的2项典型能力

能力一:座舱数字人

 

image.png

 

元宇宙Web 3 概念愈发普及,应用到座舱场景下,可以实现座舱数字人。

 

基于天猫精灵的智能交互 OS 系统,使用最新的自然对话技术多模交互方案,快速实现落地,可以让第三方应用网快速接入。

 

座舱数字人具有以下几个特点:

支持 2D3D 的形象快速定制。车主拍照上传即可快速生成3D形象(技术 要求高,需要深度大模型的训练),实现接近真人的个性化定制。可以选择发型服装配饰,也可以针对脸部的细部比如鼻子、嘴巴做调节。提供了写实风格形象以及卡通风格形象

定制与车主真人接近的音色。

根据场景列表或设定的触发条件,自动用户进行交互,使体验更智能。利用音箱底层的 AI 交互大脑能力,自然对话音箱车主聊天主动提问,背后是一套更复杂的平台架构提供支撑,可以定制个性化的应用

具备答疑解惑、娱乐活动、情感陪伴能力。我们提供了非常强大的开发平台,开发者、创业者可以使用低代码的模式快速搭建应用。

支持空中3D 立体全息投影裸眼3D,可以快速投放出数字的形象,实现更震撼的交互体验

 

image.png

我们提供了纯文本/语音驱动数字人以及主动交互数字人。

 

纯文本/语音驱动数字人:输入文本或语音即可驱动数字人面部的表情拟人化的音色。同时也可以搭配脸部动作、手势人是视觉动物,交谈时搭配合适的动作可以使得体验更好。适用于语音内容视觉化、车载语音应用、短视频内容制作、线上电商品介绍教育行业内容制作线下场景内容宣传

 

主动交互数字人:相比前者,它更“聪明灵动”。背后连接了人工智能天猫精灵大脑可以通过 NLU 的语义理解用户自然对话。也可以搭配触发条件比如摄像头识别车主上车后发出互动问候或提议一起玩游戏等,更像一个助手或朋友适用于线上线下互动类线下元宇宙酒店行业的 AI 服务员线上虚拟主播设定好所有内容后即可实现线上 24 小时卖货

 

image.png

 

座舱环境下,屏幕大小音箱灯光配置不同于 PC手机如果直接照搬PC或手机的游戏至座舱中,无法实现很好的用户体验。因此我们要打造基于座舱的原生游戏基于 AI 能力,通过人脸、肢体手势多模操控更适合座舱的方式充分调动座舱的音效、灯光,实现沉浸式体验。

 

座舱游戏最大的两个特点为:

 

多模交互。可以实现流畅的隔空操作,区别于外接操作手柄或触屏操作

沉浸式体验。座舱是天然的游戏空间,配合座椅沙发、环绕声、氛围灯光座椅以及超大屏幕,打造最佳的沉浸式体验。

 

 

image.png

 

那么,为什么座舱游戏已经成为一个趋势?

 

如今的车已经不是传统意义上的车新能源车更是一台计算机,类似于 iPhone 诺基亚的区别。

年轻人买车关注科技感酷。买车送游戏座舱是一件很年轻很酷的事。

座舱天然具备绝佳的游戏空间条件。

从车厂角度,车辆被售出后可以在增加有限成本的情况下,获得更多软件式的营收,同时也能为客户带来十分客观的体验感增强。

image.png

 

年轻人家庭两大购车群体的使用场景主要包括车里午休、车里陪娃、车里放松、车里休闲。

对于车厂说,座舱游戏具有三个非常重要的价值

作为新车卖点,拉动销售

车主人群运营。通过游戏来做车主运营,比如级别养成、分享 、排名、积分等,打造用户粘性。同时,可以做弱联机的游戏,加入社交元素,比如排名、交换、分享等,提升品牌粘性。

实现软件上的营收

 

image.png

座舱游戏为什么需要原生

 

首先,车辆的移动性无法百分百保证网络的稳定性,而网游对网络要求高,因此不适合照搬上车

其次,受限于车机的硬件性能, 3A 大作不太适合照搬上车。

另外,座舱屏幕尺寸过大,手游不适合直接上车,体验感不像玩游戏,更像是弹钢琴

最后,大幅身体互动类游戏也适合上车

 

因此,座舱需要原生游戏,通过AI+游戏+座舱为用车人员提供沉浸式体验。

 

image.png

 

阿里云的优势在于全套的 AI 参数以及边缘计算,支持专业的游戏厂商,创业伙伴很行业懂用户,在游戏策划相关技能应用方面有很深的积累。

 

我们可以双方的技术优势联合起来提供给主机厂,使游戏厂商主机厂快速适配。

image.png

 

座舱游戏分为单人单机、多人单机以及多人多机。整套游戏底层计算单元,共用 AI 引擎上层游戏独立分布且多屏幕场景下支持多人同时独立游戏车企希望为用户提供更丰富的娱乐用户在车上多花时间,有利于车企后续做后向的运营。

 

image.png

 

我们欢迎各类创业者开发者一起合作。比如游戏类开发者以及儿童益智类开发者可以与我们合作,现有的点击类触摸类的交互变为多模交互比如生活服务的开发者注重场景化智能化,希望在不同的场景之下更好理解用户感知用户,为其提供相关的服务可以与我们合作,做出差异化比如音频内容开发者可以与我们合作,从纯语音升级为个性化数字人播报

 

我们可以合作伙伴带来交互方式升级AI 交互能力支持以及销售渠道的拓展。

 

AI 交互能力支持分为三类

智能语音交互:包括ASR 端上的自动语音识别、NLU、个性化TTS音色、说话人检测、多模态主人识别以及说话人脸部朝向检测。车辆是一个密闭空间,多人同时说话时需要能够判断响应谁的指令。

座舱智能视觉交互:人脸属性、人形检测手势视线动态坐标检测、疲劳驾驶、拨打电话检测等。比如可以自动提取眼睛朝向,通过眼球控制游戏,比如儿童模式可以帮助车主在行驶过程进行儿童看护与儿童互动,车主得以专心驾驶

车载数字人:包括文本/语音驱动以及主动交互两大类

 

另外,我们会在商务销售资源方面为合作伙伴提供支持合作伙伴无需投入大量精力资源维护搭建商务关系无需耗费大量精力做项目的对接。阿里云与国内外车厂都有大量合作,可以帮助合作伙伴快速实现对接。


接下篇:https://developer.aliyun.com/article/1224758?groupCode=chuang

相关文章
|
4月前
|
云安全 人工智能 安全
Dify平台集成阿里云AI安全护栏,构建AI Runtime安全防线
阿里云 AI 安全护栏加入Dify平台,打造可信赖的 AI
3058 166
|
人工智能 自然语言处理 Devops
云效 AI 智能代码评审体验指南
云效AI智能代码评审正式上线!在合并请求时自动分析代码,精准识别问题,提升交付效率与质量。支持自定义规则、多语言评审,助力研发效能升级。立即体验AI驱动的代码评审革新,让AI成为你的代码质量伙伴!
511 7
|
4月前
|
人工智能 自然语言处理 算法
【2025云栖大会】AI 搜索智能探索:揭秘如何让搜索“有大脑”
2025云栖大会上,阿里云高级技术专家徐光伟在云栖大会揭秘 Agentic Search 技术,涵盖低维向量模型、多模态检索、NL2SQL及DeepSearch/Research智能体系统。未来,“AI搜索已从‘信息匹配’迈向‘智能决策’,阿里云将持续通过技术创新与产品化能力,为企业构建下一代智能信息获取系统。”
562 9
|
4月前
|
机器学习/深度学习 人工智能 Serverless
吉利汽车携手阿里云函数计算,打造新一代 AI 座舱推理引擎
当前吉利汽车研究院人工智能团队承担了吉利汽车座舱 AI 智能化的方案建设,在和阿里云的合作中,基于星睿智算中心 2.0 的 23.5EFLOPS 强大算力,构建 AI 混合云架构,面向百万级用户的实时推理计算引入阿里云函数计算的 Serverless GPU 算力集群,共同为智能座舱的交互和娱乐功能提供大模型推理业务服务,涵盖的场景如针对模糊指令的复杂意图解析、文生图、情感 TTS 等。
|
4月前
|
机器学习/深度学习 人工智能 算法
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
本数据集包含2500张已标注实验室设备图片,涵盖空调、灭火器、显示器等10类常见设备,适用于YOLO等目标检测模型训练。数据多样、标注规范,支持智能巡检、设备管理与科研教学,助力AI赋能智慧实验室建设。
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
|
4月前
|
机器学习/深度学习 人工智能 算法
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
NBA中国与阿里云达成合作,首发360°实时回放技术,融合AI视觉引擎,实现多视角、低延时、沉浸式观赛新体验,重新定义体育赛事观看方式。
718 0
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
|
4月前
|
存储 人工智能 OLAP
AI Agent越用越笨?阿里云AnalyticDB「AI上下文工程」一招破解!
AI上下文工程是优化大模型交互的系统化框架,通过管理指令、记忆、知识库等上下文要素,解决信息缺失、长度溢出与上下文失效等问题。依托AnalyticDB等技术,实现上下文的采集、存储、组装与调度,提升AI Agent的准确性与协同效率,助力企业构建高效、稳定的智能应用。
|
人工智能 物联网
2亿IoT生态、与人教社合作AI教育 天猫精灵平台布局进入收获期
9月25日,阿里人工智能实验室在云栖大会上宣布,目前天猫精灵已经接入了超过 660多家IoT平台,覆盖超过60个品类,900多个品牌,支持3600多型号,2亿可连接设备,成为最大的IoT生态开放平台。
|
4月前
|
消息中间件 人工智能 安全
云原生进化论:加速构建 AI 应用
本文将和大家分享过去一年在支持企业构建 AI 应用过程的一些实践和思考。
1012 50