实时云渲染串流技术详解

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
可观测可视化 Grafana 版,10个用户账号 1个月
简介: 云串流即使应用于云旅游、考古、数字孪生、云展厅等领域,通过将3D应用运行于云端,降低用户端配置需求。技术流程包括用户股指令、服务器执行、编码传输及前端播放,实现低延迟的实时云渲染。在弱网环境下,需只能调节画质确保流畅性。3D应用采用云推理,服务器需满足3D应用的硬件要求,尤其是GPU和GPU的性能,而前端主要负责解码播放,一般1080P视频能力即可。自行研发成本高,建议选择成熟商家点量云流。

提到云串流或者云推流很多人可能和游戏关联起来,其实这个技术的应用领域不仅仅是游戏,还有云上旅游、考古、智慧园区、智慧城市、虚拟仿真等等行业。其解决的问题是将一些大型的3D应用程序放在云端,程序在运行的时候也是在云端,这样用户侧的前端就不需要考虑什么配置的问题。

从技术角度来阐述云推流/串流过程是:用户指令输入、服务器上3D应用接收到指令执行、将程序执行过程进行记录编码、网络传输、前端接收和播放。整个过程均是在毫秒级,对用户来说是无感知的,和本地安装3D应用使用操作完全一样。本质来说就是完成视频流在网络上的低延迟传输,尤其是和3D应用的结合也有很多时候称之为实时云渲染技术。

0515关于云推流技术.png
实时云渲染整个链路环节分为多个模块,那每个模块都达到尽可能低的延迟,才能保证各个领域的低延迟。这就牵涉比较专业的各种低延迟策略了。这里以前端用户的视角做简单的说明,我们知道不同的画质要求的带宽是不一样的,就像我们看视频的时候会有高清、标清、超清、4K等,如果是网络好的情况下这些画质都没有什么影响,但如果在弱网环境下就需要多种的网络调节策略,比如在带宽达到一定的阈值就要自动调节画质,在网络恢复时在自动调节回原来的画质。但有时候流畅可能并不是唯一的参考标准,如果对于画质要求就是比较高的,那就需要采取其他的低延迟策略。不过从实际使用的角度来说,保证使用时的流畅性是云推流/串流首要考虑的。

那这些3D应用在使用云推流方案时,对于服务器和前端的参数配置,有什么要求呢?这个问题其实不是云串流软件的要求,是3D应用本身对于服务器参数的要求,虽然实时渲染时需要对视频流进行编码,但是这个对CPU和GPU的占用是比较低的。在整个技术方案中,对服务器显卡以及CPU依赖比较大的是3D应用本身。因为推流技术本质上,并没有改变3D应用运行需要的硬件算力,让3D大型应用能在服务器上,流畅跑起来是推流的前提。对于前端的参数就没什么要求了,因为本身程序都是跑在服务器上,前端只需要解码播放即可,对于普通用户来说判断的准则就是能看1080P的视频就可以。
0517服务器和前端参数配置.png

这个技术方案在实际使用中,如果是自己研究需要花费大量的时间和精力,而且在实际应用中要面临各种问题。如果不是有专业的团队,来做该项技术的持续研究和挖掘维护,有点得不偿失,不如直接选择已有的云串流厂家的方案。

相关文章
|
17天前
|
搜索推荐 图形学
实时云渲染技术下的虚拟汽车展厅 为什么越来越受青睐?
实时云渲染技术下的虚拟汽车展厅 为什么越来越受青睐?
|
17天前
|
存储 UED
实时云渲染技术如何助力虚拟展厅?
实时云渲染技术如何助力虚拟展厅?
|
17天前
|
vr&ar
元宇宙虚拟展厅与实时云渲染技术的完美融合:沉浸式未来
元宇宙虚拟展厅与实时云渲染技术的完美融合:沉浸式未来
|
17天前
|
存储 数据处理 vr&ar
实时云渲染技术为何被称为VR和AR领域的加速剂?
实时云渲染技术为何被称为VR和AR领域的加速剂?
|
6月前
|
监控 云计算 UED
揭秘:工业元宇宙建设为什么离不开实时云渲染技术?
揭秘:工业元宇宙建设为什么离不开实时云渲染技术?
|
6月前
|
负载均衡 算法 vr&ar
实时云渲染的关键技术有哪些?
实时云渲染的关键技术有哪些?
|
6月前
|
缓存 运维 监控
实时云渲染技术在智慧园区中的广泛应用
实时云渲染技术在智慧园区中的广泛应用
|
数据可视化 安全 图形学
实时云渲染技术应用之三维可视化部署
实时云渲染技术是以上两个方案的升级方案,该方案是纯B/S架构,将三维可视化、UE\Unity模型放置在服务器上,通过云渲染软件系统流化出可以在手机、电脑、平板、智慧屏等设备上可以直接访问的URL地址。程序运行是在云端服务器上,本地设备无需提供任何算力,用户也不需安装任何插件,而且在网络OK的情况下在任何设备任何地点(办公室、家里等)都可随时打开。在模型建设的阶段也可以选择多种引擎,无论是精美度更高的UE5还是unity、3dmax 或者其他设计软件都是OK的。因为云流化的原理其实不改变程序的指令执行过程,而是把整个执行过程画面以视频流的方式传回给用户终端设备。
382 0
实时云渲染技术应用之三维可视化部署
|
编解码 缓存 移动开发
一文读懂云渲染“串流”全链路时延及优化策略
这是一个让云游戏完美起步的时代。
1364 0
一文读懂云渲染“串流”全链路时延及优化策略