阿里云联合平行云推出云XR平台,支持沉浸式体验应用快速落地

简介: 2022年6月,阿里云与平行云联合发布云XR平台,降低云端视觉计算应用开发门槛,加速数字孪生、虚拟人、虚拟现实等XR应用落地。该平台由阿里云提供算力调度服务,平行云全面集成3D实时渲染、音视频编码与推流等服务,支持多终端接入,助力互联网、新零售、社交等行业创新业务形态。开发者可通过SDK轻松接入,实现3D应用快速云化部署,终端用户可享受低延时、高性能的沉浸式体验。

2022年6月,阿里云与平行云联合发布云XR平台,降低云端视觉计算应用的开发门槛,加速数字孪生、虚拟人、虚拟现实、沉浸式体验与虚拟仿真平台等XR应用落地,帮助互联网、新零售、社交、工业、交通、城市管理等行业探索创新业务形态。该模块已上线计算巢产品模块,有需求的用户可以自助下单使用。
image.png

阿里云XR平台提供算力调度、3D实时渲染、音视频编码与推流、应用发布与用户管理等服务。3D应用开发者可将应用发布托管到云XR平台,3D应用用户可以使用AR/VR/MR等多终端加入到云XR平台与3D应用进行交互并体验。

云端视觉计算热潮兴起,提升用户体验

近几年,云游戏、沉浸式体验、虚拟现实、虚拟人等热潮兴起,这些应用都有不少高保真3D模型,需要大量的算力进行模型渲染与图像处理。因此阿里云统称此类为视觉计算应用。

新兴的视觉计算类应用,往往需要部署在云端。一是由于其对计算的巨大需求,终端的算力已经难以满足,需要云端的超大规模弹性算力支持;二是将计算放在云端,能减少对终端设备算力的依赖,可支持头显、手机等更丰富的终端形态,也无需下载GB级别的客户端,随时随地快速接入,大大提升了用户体验。对于开发者而言,云原生视觉计算应用大幅降低了终端适配成本,为研发降本提效。

大型3A端游、BIM工程可视化系统等就是比较传统的视觉计算应用。以往这类应用往往安装在高配置的终端上,如配置独显的PC和专门图形工作站上;相关模型流转和传播极为不便,更存在信息泄露风险。

新兴的云端视觉计算则打破了所有限制,可以通过手机、PC、XR(AR/VR/MR) 头显终端等进行交互。业务架构上,将计算和交互解耦,云端实时3D渲染,内容通过音视频流推送到终端,终端主要承担音视频输出及人机交互作用。

然而,在云端视觉计算应用的渲染、编码和推送等环节,开发者仍需要解决众多技术挑战,例如:

  • 如何在云端做到仅进行3D渲染不做显示输出;
  • 如何将渲染完成的画面推送到终端,并保证音画同步和低延时,兼容不同设备;
  • 如何将指定应用的渲染画面推送给指定的用户;
  • 如何实现3D应用与云端计算资源的高效匹配。

阿里云XR平台,为3D应用轻松云化

阿里云XR平台能提供从底层设施到平台层的服务,覆盖上述渲染、编码、推流等流程,开发者通过SDK即可接入,既支持零代码应用部署,也支持更加灵活的二次开发。3D应用开发者只需要将其应用发布托管到云XR平台,即可自动完成云化部署与应用封装,终端用户可以通过不同终端轻松体验应用。

阿里云异构计算产品专家介绍,阿里云XR平台具有以下优势

  • 兼容多平台:云XR平台支持多种流行实时3D引擎,包括Unity 3D、Unreal Engine、CryEngine等,也支持多种多流行AR/VR/MR终端,兼容Windows、Linux、MacOS、Android、iOS等不同系统。
  • 3D应用即刻发布:通过阿里云计算巢,用户可以在数分钟内将自己的3D应用在云XR平台上部署,并将服务发布到全球任何角落。一套平台解决渲染、编码、推流全流程的软硬件技术服务,同时提供用户管理,资源管理等服务。有二次开发需求的用户可通过平台提供的完善接口,实现丰富的业务系统,与用UE等各类3D引擎开发的XR系统分离,以实现各自单独开发,降低开发难度与人员投入成本。
  • 高性能低延时:云XR平台可选搭载了NVIDIA A10 Tensor Core GPU的阿里云vGN7i实例和搭载了NVIDIA RTX A6000 GPU的vGN6i实例 ,这些实例支持阿里云神龙及NVIDIA 硬件实时光线追踪等强大功能,包含AI CG优化、AI视频画质优化、图像及流媒体优化等算法和套件,其可实现更高性能的3D实时渲染和低延时交互。
  • 资源弹性调度:云XR平台结合阿里云弹性计算的资源弹性优势,结合弹性计算即开即用的计算资源交付优势,云XR平台可以在极大范围内实现业务的弹性部署和应用的弹性交付。

image.png

云端视觉计算应用架构图

云XR平台由阿里云与平行云联合出品,阿里云主要提供自研神龙架构的超强云端算力,及自研流媒体编码技术,平台层则由平行云对渲染、编码与推流等服务进行高效封装,集成了阿里云底层IaaS能力,支持NVIDIA CloudXR平台。
image.png

相关文章
|
9月前
|
Cloud Native 云栖大会 调度
平行云荣膺"阿里云产品生态伙伴合作攻坚奖""2022云栖科技创新奖"
2022云栖大会在杭州成功举办,平行云作为阿里云重要合作伙伴受邀参会,并凭借“元域电音Club”精彩亮相。会上,平行云荣获“阿里云产品生态伙伴合作攻坚奖”和“2022云栖科技创新奖”两项大奖,彰显其在云化XR领域的卓越贡献与创新实力。平行云为阿里云XR平台提供算力调度、3D实时渲染等服务,助力元宇宙产业云化转型,推动多行业创新业务形态发展。
267 15
|
9月前
|
传感器 人机交互 定位技术
XR交互技术趋势:6DoF追踪、手势识别、眼动跟踪……
XR交互技术与实时云渲染共同推动了虚拟现实和增强现实的沉浸式体验发展。XR交互技术通过6DoF追踪、手势追踪、眼动追踪等手段,提供更自然、精准的用户交互方式;而实时云渲染则利用云端计算能力,为终端设备呈现高质量、低延迟的复杂图形内容。两者结合,使用户在XR环境中获得更加真实、流畅的体验。未来,XR交互技术将向多模态、精细化方向发展,进一步提升用户的沉浸感和交互体验。
593 20
|
9月前
|
编解码 定位技术 vr&ar
NETALAND惊艳上线,Paraverse平行云助力元宇宙大玩家网易闪亮登场
网易传媒旗下全新泛娱乐空间NETALAND于2023年5月上线,融合电影级场景与趣味互动,提供沉浸式元宇宙体验。通过与平行云合作,NETALAND实现了轻量化社交、全地图飞行及丰富的定制化功能,支持用户在五大风格场景中自由探索。LarkXR实时云渲染技术确保了流畅的交互体验,并助力采集宝贵的用户行为数据,推动元宇宙内容创新。
255 14
|
9月前
|
人工智能 自然语言处理 vr&ar
一句话爆改三维场景!斯坦福吴佳俊团队新作:场景语言,智能补全文本到3D的场景理解
斯坦福大学吴佳俊团队提出“场景语言”,通过程序、自然语言单词和嵌入三个组件,实现文本到3D场景的智能生成与理解。该方法能高效生成复杂逼真的三维场景,广泛应用于虚拟现实、游戏、电影等领域,具有更高的保真度和精确控制优势。文章地址:https://arxiv.org/abs/2410.16770
317 95
|
8月前
|
Web App开发 编解码 弹性计算
实时云渲染技术布道 | 像素流送技术与商业化实时云渲染产品的指标对比
随着虚幻引擎(UE)在高品质应用开发中的广泛应用,大内容与轻终端的矛盾日益突出。实时云渲染技术应运而生,成为解决这一矛盾的关键。本文以LarkXR实时云渲染平台为例,对比UE自带的像素流送插件,探讨云渲染技术的革新。LarkXR提供完整的实时云渲染PaaS服务,涵盖云端算力管理、网络传输优化和异构终端接入全流程,支持2K-8K分辨率、30-120FPS帧率,具备强大的集群并发能力和多引擎兼容性,整体性价比远高于像素流送,为开发者提供了更高效、专业可靠的解决方案。
|
9月前
|
资源调度 双11 UED
平行云助力“天猫X网易云音乐”两大IP,打造爆款元宇宙云派对
2022年,天猫与网易云音乐联手打造了一场元宇宙“云派对”,通过3D互联网技术,以游戏+演唱会的形式吸引上万名用户参与。平行云LarkXR提供实时云渲染技术支持,解决高并发和互动数据沉淀难题,实现万人同频互动,带来沉浸式购物、游戏、音乐体验,助力品牌长效增长。
195 11
|
8月前
|
Web App开发 存储 人工智能
3D/XR线上展厅实时云渲染平台搭建方案
在数字化浪潮下,传统3D展厅面临高成本、维护难、兼容性差等问题。实时云渲染技术革新展览展示行业,通过云端渲染和超低延迟视频流推送,用户可使用XR设备沉浸式体验云展厅。结合VR/AR/AI技术,提供智能导览、展品推荐等功能,分析观众行为数据优化展览内容。该方案支持多平台访问,已在杭州亚运会等大型活动应用,极大降低参会门槛,提升传播和营销效果。平行云的实时云渲染技术支持低成本搭建在线展览平台,助力实现一机逛遍博物馆的美好愿景。
|
9月前
|
开发者 ice
实时云渲染中的NAT转发服务支持个人电脑秒变云渲染服务器
实时云渲染技术广泛应用于XR领域,助力数千客户完成云端部署。平行云推出的转发服务解决了家庭网络动态IP问题,使个人电脑成为实时云渲染服务器,按实际使用分钟数计费,无用户访问不收费。通过配置LarkXR的代理转发Server和ICE Server,开发者可轻松实现互联网访问内网XR应用,极大提升了开发、测试和演示的便利性。
146 11
|
9月前
|
Web App开发 编解码 vr&ar
使用Web浏览器访问UE应用的最佳实践
在3D/XR应用开发中,尤其是基于UE(虚幻引擎)开发的高精度场景,传统终端因硬件局限难以流畅运行高帧率、复杂效果的三维应用。实时云渲染技术,将渲染任务转移至云端服务器,降低终端硬件要求,确保用户获得流畅体验。具备弹性扩展、优化传输协议、跨平台支持和安全性等优势,适用于多种终端和场景,特别集成像素流送技术,帮助UE开发者实现低代码上云操作,简化部署流程,保留UE引擎的强大开发能力,确保画面精美且终端轻量化。
375 17
使用Web浏览器访问UE应用的最佳实践
|
8月前
|
Web App开发 编解码 vr&ar
Deepseek解读 | UE像素流送与实时云渲染技术的差别
为了实现UE引擎开发的3D/XR程序推流,开发者通常使用像素流送(Pixel Streaming)技术。它通过WebRTC协议将服务器端渲染的画面传输到客户端,适用于短时、少并发场景。然而,在项目落地阶段,其局限性显现,实时云渲染方案成为更好的选择。Deepseek分析表明,实时云渲染具备高性能分布式渲染、低延迟传输、多平台支持等优势,特别适合高复杂度场景和大规模应用。Paraverse平行云的LarkXR产品,作为领先的实时云渲染解决方案,提供高质量、低延迟的渲染体验,支持多种3D引擎和XR内容格式,具备弹性扩展和成本优化等特点,广泛应用于元宇宙、虚拟仿真等领域。