在过去的两个月里,阿里集团发生了很多大事。908年会霸屏了朋友圈,刚刚圆满落幕的云栖大会再一次刷爆了科技领域。对于那些无法亲临现场感受盛会的观众,阿里云联合阿里集团也在线上开放了VR直播。本文将详细介绍这套自研VR直播的技术亮点、解决方案和应用场景。
2017云栖大会的VR直播核心技术亮点
第一.3D360实时拼接 同步现场盛况
3D 360度 5机位VR直播,在大会现场部署拼接服务矩阵,实时数据处理能力达到50GB/S,将拼接对直播流的延迟降低到1S以内,保证了3D拼接的实时性。
第二.3D图文包装 增强现场感
在3D直播流中增加2D平面特写镜头,同时增加大会3Dlogo及节目信息等,增强现场感的同时解决VR摄像机不能调焦的问题。行业内率先实现在3D直播流中实时加入2D画面及3D模型。
第三.现场图像增强 确保完美观看体验
在现场搭建图像增强处理服务器,根据现场灯光变化,对直播画面的对比度、噪点及锐度进行实时算法调优,同时将延迟控制在毫秒范围内。
第四.直播流多平台分发 多端观看无障碍
针对不同平台的播放能力,将现场采集的3D直播流进行云端转码,在优酷主客上落地1080P 4M 2D H.264格式直播流,在优酷VR PRO上落地 4K 15M 3D H.265格式直播流。为了保障直播的稳定,采用主备双链路热备高可用高码率的推流及直播断流时故障自动恢复机制。
VR直播云服务解决方案
阿里VR音视频直播采集系统、VR编解码技术和播控技术均属于全球领先水平,目前已整合成VR直播云服务解决方案,开放给用户使用。
解决方案的核心服务包括:
一, 定制化播放组件:iOS/Android播放SDK、H5播放器、一体机SDK
二, 直播管理组件:进行直播频道创建、修改、维护控制台,视频存储管理,数据监控和统计分析
三, 直播推流管理:支持HEVC推流,采用RTMP/MPEG TS UDP
四, 直播分发组件:实时转码(支持金字塔/多路流转码),直播播放地址/API
上图是VR直播产品架构图,从视频采集系统,到视频增强处理,再到直播中后台,最终到达终端播放。
其中视频采集系统是VR直播至关重要的第一步。该VR解决方案采用多机位实时采集,并在摄像机之间进行时间轴同步,可以完美还原现场环境。现场工作站具备单台10gb/s的数据处理能力,完美支持4K超高质量画质。并且,这也是业内首个支持实时3D 360度画面拼接系统的VR解决方案,在直播画面中呈现更加身临其境的感觉。
视频采集完成后,视频来到了增强处理环节。在这一阶段,该VR解决方案拥有国内首家3D VR实时图文包装系统,通过计算深度信息,将信息与全景3D画面进行实时融合处理,带给观众完美的观看体验。
在编解码这一环,实现业界第一的H.265+Dynamic Streaming端到端解决方案,大幅度优化了切流体验和实时性。
该解决方案在技术上有很多突破,同时,在操作层面也非常人性化,一站式直播管理与数据监控后台,可以满足用户对于直播管理、多端容灾、状态监测和数据统计等各业务场景需求。
VR直播云服务三大应用场景
第一.演出
无论是小型Livehouse还是大型演唱会,阿里VR直播服务都能让观众感受到身临其境的感觉。该方案支持杜比全景声,可还原最佳音质,保证卓越的聆听效果,独家的3D图文包装功能让用户可以保持对内容的高度关注。
第二.赛事
将体育赛事进行3D全景的直播,可以让用户成为比赛的一部分,全方位观看比赛,仿佛一切发生在眼前,不留任何遗憾。实时比分信息和赛事信息展示,比传统直播更加灵活,充满互动的乐趣。
第三.展会
VR直播提供给用户一种充满氛围感的全新视角,VR互动可以带来一种交互的全新维度。无论是商务活动还是发布会等场景,VR直播都能赋予它更加新鲜而独特的价值。
VR直播能带用户传统直播无法营造的兴奋感和新鲜感,采用阿里云VR直播云服务解决方案,您可以一站式接入全球领先的采集、编码、播控技术,快速拥有令用户尖叫的全新直播能力。