爱奇艺:5G新技术推动互动视频技术发展、未来应用场景广阔

      在日前召开的“第三届5G千兆网产业论坛”上,爱奇艺资深科学家王涛以《多机位互动视频制播系统及应用》为题发表了演讲,详细分享了在5G等新技术的推动下,互动视频技术的发展和应用情况。



他指出,视频行业迫切需要丰富用户视听体验,提高制播效率。“在5G环境下推动互动视频技术和应用发展,是完善高新视频业态的一项重要任务。互动视频具有剧情选择、视角切换、画面交换等交互能力,作为一种“非线性视频”的新兴业务形态,可广泛应用于影视娱乐、文化旅游、体育竞技、在线教育、电商购物等领域。项目技术和应用对于提高互动视频生产效率、优化互动视频视听体验,推动高新视频行业生态发展,具有重要的作用和价值。”


基于5G等技术开发互动视频制播系统

那么,5G在互动视频当中发挥了怎样的作用呢?王涛介绍到,互动视频具有数据量大,实时要求高的特点。多机位互动视频根据机位数量比单机位增加4~10倍的数据量,视频流切换如果卡顿了几秒,会非常影响用户的沉浸感,而5G的高带宽、低延时能力为互动视频提供了很好的基础设施。


王涛告诉与会者,在此基础上,爱奇艺利用云计算、大数据、5G、超高清、边缘计算、人工智能等技术,研发了具有自主知识产权的、集互动视频创作、生产、分发、播放等为一体的互动视频制播平台《多机位互动视频制作平台和播放系统》,其中包括互动视频制播系统,自由视角系统,多机位直播系统和互动投票系统。项目将进一步催生出更大的商业价值,为下一代娱乐拓展更大的造梦舞台和想象空间。


基于5G宽带网络、边缘计算的高带宽、低延时网络传输和视频预加载技术,爱奇艺提升了互动视频切换的流畅性。同时还提出了多视角-一屏四看交互方式。在不妨碍用户观看主画面的同时,提供多个可全方位多角度展示内容的子视角,用户可在多个子视角之间自由切换,满足用户对内容多样性的需求。


“在互动视频播放系统关键技术方面,视频封装中的信令数据封装、多视点编码和智能编码都是关键技术,而在视频传输方面,高带宽低时延传输和网络切片则为关键技术。”他表示,爱奇艺在这当中的主要创新包括互动视频数据格式标准、互动播控信令(IPCS)、视频预加载技术、互动播放引擎和多机位画面交互等。


互动视频对网络基础设施提出新要求

王涛分析称,互动视频的数据量大,实时互动对网络基础设施的要求非常高,因此爱奇艺研发了RTS超低延时音视频分发网络系统。具体来看,通过编码GOP收缩、同机中继、信源偏移,爱奇艺实现了云端多画面合流编码;同时,其基于高性能音视频转发单元、智能路由调度、抗丢包低延迟音视频传输等技术实现端到端延时500ms秒左右的超低延时视音频分发服务,具有接入成本低、节点覆盖广、可承载千万级大规模并发的能力。


 “特别是我们在现场直播的时候,采集端通常需要拉网络专线来保证带宽,而实际上在户外拉专线是非常麻烦的,对于一些山区、移动场景部署网络就更不方便。现在有了5G基站,我们通过5G背包就可以直接在现场把拍摄的视频推流到后台的视频云进行转码和分发,大大提高了制播效率。”


同时,王涛指出,用户端对5G也有着很大的需求。针对此,爱奇艺在十一黄金周前联合国铁吉讯在全国500组高铁动车上部署了“奇速专区”服务,覆盖京沪、京广、沪昆等线路。通过爱奇艺App “奇速专区”服务,乘客可以通过接入高铁WiFi连接到5G的边缘计算端,从而实现在高铁上流畅、无卡顿地观看视频,因此5G在边缘侧发挥了重要的作用。


王涛以今年3月爱奇艺出品的全球首个虚拟制作XR直播演唱会——“爱奇艺THE9虚拟之城线上演唱会”为例进行了介绍,本场演唱会通过XR技术和影视级LED写实化虚拟技术,实现了实时渲染,将写实化、风格化虚拟场景完美融舞台,呈现给用户震撼的科幻效果。通过多机位画面自由切换、自由视角、嘉宾粉丝观众大屏连线、1v1互动对话、Avatar虚拟座席、投票刷屏等多种新方式提升观众用户的交互观看体验,让大家隔着屏幕也能获得部分超越现场的多视角观看体验。


“互动视频是我们在高新视频领域的积极探索。它本身数据量大,实时性要求高,在增加用户的视频体验和交互能力的同时,对我们网络的基础设施也提出了新的要求,而5G大带宽、低延时、广连接解决了我们的瓶颈的问题。我觉得5G是一个非常必要的基础设施,特别是解决了我们采集端上行以及用户端边缘端下行的瓶颈问题。此外,因为互动视频牵扯到新的数据格式和技术接口,我们跟广电总局和工信部研究了一系列的互动视频的标准。”


他表示,截至目前,爱奇艺已经牵头完成了广电标准《互联网互动视频数据格式规范》,广电白皮书《5G 高新视频—互动视频技术白皮书》,并牵头参与了工信部标准《互联网超高清视频播放软件 第2部分:互动视频播放系统技术要求》,推进视频行业生态发展。多机位互动视频制播系统在爱奇艺自制的影视剧、综艺、晚会直播等活动中得到了广泛应用,未来能够服务于全球的晚会直播,在线教育、会议等互动场景,具有广阔的市场应用价值。

Copyright © TDIA. All Rights Reserved 京ICP备09046230号-2

Follow us TEL +86-10-82038094/82038834/82038841

WeChat Subscription

TDIA Sina Weibo