今年,总台春晚《笔走龙蛇》节目画面中呈现的“空中环绕、时空凝结”效果给许多观众留下深刻印象。
该节目由甄子丹领衔、众多武术高手与河南少林塔沟武校学员演绎,阿里云通义大模型AI技术支持,共同为全球观众带来身临其境的多视角观看体验。这一画面背后的技术被称为“云上多视角呈现技术”,通过现场多视角画面采集、云上AI三维重建、输出全链路高清节目画面三步来实现。
// 首先,采集现场画面
在传统技术方案中,往往需要在现场高精度部署上百台相机进行画面采集,且对水平、间距准度要求极高,整体部署方案难度大、成本高。此次阿里云提供的云上多视角呈现技术方案从算法侧进行技术革新,使用三维重建与神经体渲染相结合的空间智能技术,精简现场设备数量且支持不等间距、不等高度的灵活部署方式。
首次实现在春晚舞台边缘部署30台摄像机阵列组成云上多视角拍摄系统,以“演播厅天空环绕视角”实现对《笔走龙蛇》节目的拍摄制作。通过此次轻量化设备灵活部署的方案,不仅大幅减少了硬件设备对现场舞台的干扰,同时还降低了硬件部署的难度和成本。
在画面效果上,传统技术对运镜轨迹有较强的约束,而云上多视角呈现技术可以实现时间、空间两个维度自由运镜,呈现更丰富且自由的画面效果。
在时间维度上,不仅能实现动态画面呈现,还能为观众带来视角变化的观看体验。在空间维度上,则可以灵活定义虚拟焦点,并围绕焦点应用运镜特效和旋转无极变速。
// 接着,云上画面渲染
由摄像机采集到的素材画面将会实时传播到云上,进行画面重建与渲染。不同于转播场景中云上多视角呈现技术的应用,总台春晚作为实时直播画面,对于画面渲染速度有着更高的要求。
因此,此次应用在总台春晚中的云上多视角呈现技术基于高效的采集链路编解码封装、云端灵活扩展的强大算力和自动化分片机制进行了全新升级。
最终应用在总台春晚中的云上多视角呈现技术,在准实时应用场景下10s内即可完成3D场景重建和渲染,全链路不超过15s,完全适应直播级应用的时间要求,让主创团队能够在第一时间分析并编辑的“子弹时间”画面。
// 最后,输出超高清4K HDR画质节目
对于总台春晚直播节目而言,《笔走龙蛇》不仅为观众带来“空中环绕、时空凝结”的多视角的观看体验,还需要满足央媒级别(全链路4KHDR画质、500M超高清码率)的超高标准画质要求。
这一点则是依托阿里云多年的制作、转码、AI能力积累,对画面进行收录、处理和还原,最终输出行业领先的高保真画质,为观众呈现出极致清晰、逼真的视觉效果。
此前,阿里云的云上多视角呈现技术已在北京冬奥会、巴黎奥运会云转播等多个项目中广泛应用。
/ END /