阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流(中)

简介: 阿里云创新手册-天猫精灵专场-天猫精灵智能座舱AI能力开放合作交流

接上篇:https://developer.aliyun.com/article/1224763?spm=a2c6h.13148508.setting.24.1b214f0eEgbVNQ


二、创业伙伴可以借力的2项典型能力

能力一:座舱数字人

 

image.png

 

元宇宙Web 3 概念愈发普及,应用到座舱场景下,可以实现座舱数字人。

 

基于天猫精灵的智能交互 OS 系统,使用最新的自然对话技术多模交互方案,快速实现落地,可以让第三方应用网快速接入。

 

座舱数字人具有以下几个特点:

支持 2D3D 的形象快速定制。车主拍照上传即可快速生成3D形象(技术 要求高,需要深度大模型的训练),实现接近真人的个性化定制。可以选择发型服装配饰,也可以针对脸部的细部比如鼻子、嘴巴做调节。提供了写实风格形象以及卡通风格形象

定制与车主真人接近的音色。

根据场景列表或设定的触发条件,自动用户进行交互,使体验更智能。利用音箱底层的 AI 交互大脑能力,自然对话音箱车主聊天主动提问,背后是一套更复杂的平台架构提供支撑,可以定制个性化的应用

具备答疑解惑、娱乐活动、情感陪伴能力。我们提供了非常强大的开发平台,开发者、创业者可以使用低代码的模式快速搭建应用。

支持空中3D 立体全息投影裸眼3D,可以快速投放出数字的形象,实现更震撼的交互体验

 

image.png

我们提供了纯文本/语音驱动数字人以及主动交互数字人。

 

纯文本/语音驱动数字人:输入文本或语音即可驱动数字人面部的表情拟人化的音色。同时也可以搭配脸部动作、手势人是视觉动物,交谈时搭配合适的动作可以使得体验更好。适用于语音内容视觉化、车载语音应用、短视频内容制作、线上电商品介绍教育行业内容制作线下场景内容宣传

 

主动交互数字人:相比前者,它更“聪明灵动”。背后连接了人工智能天猫精灵大脑可以通过 NLU 的语义理解用户自然对话。也可以搭配触发条件比如摄像头识别车主上车后发出互动问候或提议一起玩游戏等,更像一个助手或朋友适用于线上线下互动类线下元宇宙酒店行业的 AI 服务员线上虚拟主播设定好所有内容后即可实现线上 24 小时卖货

 

image.png

 

座舱环境下,屏幕大小音箱灯光配置不同于 PC手机如果直接照搬PC或手机的游戏至座舱中,无法实现很好的用户体验。因此我们要打造基于座舱的原生游戏基于 AI 能力,通过人脸、肢体手势多模操控更适合座舱的方式充分调动座舱的音效、灯光,实现沉浸式体验。

 

座舱游戏最大的两个特点为:

 

多模交互。可以实现流畅的隔空操作,区别于外接操作手柄或触屏操作

沉浸式体验。座舱是天然的游戏空间,配合座椅沙发、环绕声、氛围灯光座椅以及超大屏幕,打造最佳的沉浸式体验。

 

 

image.png

 

那么,为什么座舱游戏已经成为一个趋势?

 

如今的车已经不是传统意义上的车新能源车更是一台计算机,类似于 iPhone 诺基亚的区别。

年轻人买车关注科技感酷。买车送游戏座舱是一件很年轻很酷的事。

座舱天然具备绝佳的游戏空间条件。

从车厂角度,车辆被售出后可以在增加有限成本的情况下,获得更多软件式的营收,同时也能为客户带来十分客观的体验感增强。

image.png

 

年轻人家庭两大购车群体的使用场景主要包括车里午休、车里陪娃、车里放松、车里休闲。

对于车厂说,座舱游戏具有三个非常重要的价值

作为新车卖点,拉动销售

车主人群运营。通过游戏来做车主运营,比如级别养成、分享 、排名、积分等,打造用户粘性。同时,可以做弱联机的游戏,加入社交元素,比如排名、交换、分享等,提升品牌粘性。

实现软件上的营收

 

image.png

座舱游戏为什么需要原生

 

首先,车辆的移动性无法百分百保证网络的稳定性,而网游对网络要求高,因此不适合照搬上车

其次,受限于车机的硬件性能, 3A 大作不太适合照搬上车。

另外,座舱屏幕尺寸过大,手游不适合直接上车,体验感不像玩游戏,更像是弹钢琴

最后,大幅身体互动类游戏也适合上车

 

因此,座舱需要原生游戏,通过AI+游戏+座舱为用车人员提供沉浸式体验。

 

image.png

 

阿里云的优势在于全套的 AI 参数以及边缘计算,支持专业的游戏厂商,创业伙伴很行业懂用户,在游戏策划相关技能应用方面有很深的积累。

 

我们可以双方的技术优势联合起来提供给主机厂,使游戏厂商主机厂快速适配。

image.png

 

座舱游戏分为单人单机、多人单机以及多人多机。整套游戏底层计算单元,共用 AI 引擎上层游戏独立分布且多屏幕场景下支持多人同时独立游戏车企希望为用户提供更丰富的娱乐用户在车上多花时间,有利于车企后续做后向的运营。

 

image.png

 

我们欢迎各类创业者开发者一起合作。比如游戏类开发者以及儿童益智类开发者可以与我们合作,现有的点击类触摸类的交互变为多模交互比如生活服务的开发者注重场景化智能化,希望在不同的场景之下更好理解用户感知用户,为其提供相关的服务可以与我们合作,做出差异化比如音频内容开发者可以与我们合作,从纯语音升级为个性化数字人播报

 

我们可以合作伙伴带来交互方式升级AI 交互能力支持以及销售渠道的拓展。

 

AI 交互能力支持分为三类

智能语音交互:包括ASR 端上的自动语音识别、NLU、个性化TTS音色、说话人检测、多模态主人识别以及说话人脸部朝向检测。车辆是一个密闭空间,多人同时说话时需要能够判断响应谁的指令。

座舱智能视觉交互:人脸属性、人形检测手势视线动态坐标检测、疲劳驾驶、拨打电话检测等。比如可以自动提取眼睛朝向,通过眼球控制游戏,比如儿童模式可以帮助车主在行驶过程进行儿童看护与儿童互动,车主得以专心驾驶

车载数字人:包括文本/语音驱动以及主动交互两大类

 

另外,我们会在商务销售资源方面为合作伙伴提供支持合作伙伴无需投入大量精力资源维护搭建商务关系无需耗费大量精力做项目的对接。阿里云与国内外车厂都有大量合作,可以帮助合作伙伴快速实现对接。


接下篇:https://developer.aliyun.com/article/1224758?groupCode=chuang

相关文章
|
5天前
|
JSON 分布式计算 数据处理
加速数据处理与AI开发的利器:阿里云MaxFrame实验评测
随着数据量的爆炸式增长,传统数据分析方法逐渐显现出局限性。Python作为数据科学领域的主流语言,因其简洁易用和丰富的库支持备受青睐。阿里云推出的MaxFrame是一个专为Python开发者设计的分布式计算框架,旨在充分利用MaxCompute的强大能力,提供高效、灵活且易于使用的工具,应对大规模数据处理需求。MaxFrame不仅继承了Pandas等流行数据处理库的友好接口,还通过集成先进的分布式计算技术,显著提升了数据处理的速度和效率。
|
16天前
|
人工智能 Java Serverless
阿里云函数计算助力AI大模型快速部署
随着人工智能技术的快速发展,AI大模型已经成为企业数字化转型的重要工具。然而,对于许多业务人员、开发者以及企业来说,探索和利用AI大模型仍然面临诸多挑战。业务人员可能缺乏编程技能,难以快速上手AI模型;开发者可能受限于GPU资源,无法高效构建和部署AI应用;企业则希望简化技术门槛,以更低的成本和更高的效率利用AI大模型。
77 12
|
16天前
|
机器学习/深度学习 人工智能 自然语言处理
GLM-4V-Flash:智谱 AI 免费开放的图像理解大模型 API 接口
智谱AI推出的GLM-4V-Flash是一款专注于图像理解的免费开放大模型,提供API接口支持用户上传图片URL或Base64编码图片获取详细的图像描述。该模型通过深度学习和卷积神经网络技术,简化了图像分析流程,提高了开发效率,适用于内容审核、辅助视障人士、社交媒体、教育和电子商务等多个应用场景。
102 14
GLM-4V-Flash:智谱 AI 免费开放的图像理解大模型 API 接口
|
7天前
|
机器学习/深度学习 人工智能 运维
阿里云技术公开课直播预告:基于阿里云 Elasticsearch 构建 AI 搜索和可观测 Chatbot
阿里云技术公开课预告:Elastic和阿里云搜索技术专家将深入解读阿里云Elasticsearch Enterprise版的AI功能及其在实际应用。
阿里云技术公开课直播预告:基于阿里云 Elasticsearch 构建 AI 搜索和可观测 Chatbot
|
6天前
|
人工智能 大数据 测试技术
自主和开放并举 探索下一代阿里云AI基础设施固件创新
12月13日,固件产业技术创新联盟产业峰会在杭州举行,阿里云主导的开源固件测试平台发布和PCIe Switch固件技术亮相,成为会议焦点。
|
15天前
|
人工智能 Cloud Native 调度
阿里云容器服务在AI智算场景的创新与实践
本文源自张凯在2024云栖大会的演讲,介绍了阿里云容器服务在AI智算领域的创新与实践。从2018年推出首个开源GPU容器共享调度方案至今,阿里云容器服务不断推进云原生AI的发展,包括增强GPU可观测性、实现多集群跨地域统一调度、优化大模型推理引擎部署、提供灵活的弹性伸缩策略等,旨在为客户提供高效、低成本的云原生AI解决方案。
|
1天前
|
人工智能
阿里云领跑生成式AI工程领域,两大维度排名Gartner®生成式AI工程Market Quadrant全球第二
阿里云凭借强劲实力入选Gartner 《Innovation Guide for Generative AI Technologies》所有领域的新兴领导者象限。
|
人工智能 物联网
2亿IoT生态、与人教社合作AI教育 天猫精灵平台布局进入收获期
9月25日,阿里人工智能实验室在云栖大会上宣布,目前天猫精灵已经接入了超过 660多家IoT平台,覆盖超过60个品类,900多个品牌,支持3600多型号,2亿可连接设备,成为最大的IoT生态开放平台。
|
10天前
|
机器学习/深度学习 人工智能 自然语言处理
AI技术深度解析:从基础到应用的全面介绍
人工智能(AI)技术的迅猛发展,正在深刻改变着我们的生活和工作方式。从自然语言处理(NLP)到机器学习,从神经网络到大型语言模型(LLM),AI技术的每一次进步都带来了前所未有的机遇和挑战。本文将从背景、历史、业务场景、Python代码示例、流程图以及如何上手等多个方面,对AI技术中的关键组件进行深度解析,为读者呈现一个全面而深入的AI技术世界。
66 10
|
3天前
|
机器学习/深度学习 人工智能 物联网
AI赋能大学计划·大模型技术与应用实战学生训练营——湖南大学站圆满结营
12月14日,由中国软件行业校园招聘与实习公共服务平台携手魔搭社区共同举办的AI赋能大学计划·大模型技术与产业趋势高校行AIGC项目实战营·湖南大学站圆满结营。
AI赋能大学计划·大模型技术与应用实战学生训练营——湖南大学站圆满结营

热门文章

最新文章