基于5G网络的8KVR直播技术方案

1、技术创新，变革未来基于5G网络的8K VR直播技术方案一个小故事爱奇艺AI虚拟主播 奈奈奇遇2S VR一体机爱奇艺l 企业理念：悦享品质l 企业愿景：做一家以科技创新为驱动的伟大娱乐公司l 企业文化：集科技人才和创意人才的DNA为一体目录5G视频时代的思考与实践VR设备观影与传统观影方式的关系VR设备观影的技术挑战8K VR视频直播解决方案5G技术有望在视频领域最先发挥作用5G时代，视频行业将面临新的发展机遇移动流量已占互联网流量63.5%,5G时代将达到80%移动视频流量每年增长45%,到2023年占总体移动数据流量的73%相关预测，移动用户月平均流量将从2019年的11.7GB增长到202

2、8 年的84.4GB，视频将占到所有5G流量的80%后期发展随着基站数量、下游应用、终端数量增加，5G的广连接特性会发挥更大价值， 如：工业互联网应用、智慧城市等2019年5G初期芯片、网络、终端、应用协同， 应用发展相对落后视频类应用成熟度高，经济价值 大，依托5G提供超高清视频传输通道，实现4K/8K/12K点播、直播，AR/VR/MR,互动视频等多种商业 模式爱奇艺+5G5G技术融合视频场景视频品质内容创作等应用，引爆新的屏幕 需求采编5G超高速上传通道+边缘网络提供编解码等计算能力，使内容创作更加灵活高效点播5G超高带宽与内容下沉技术会使在线视频品质进一步得 到提升：4K/8K/VRV

3、R/AR5G+MEC技术可以有效支撑8K-VR 、VR 直播AI智能生产、智能分发、智能播放、 智能交互、智能变现Live直播更高清晰、更多视角、更多互 动、更多想象5G时代爱奇艺的实践爱奇艺与中国移动、 中国电信和中国联通 三大运营商合作，探 索5G商用落地，建 立5G终端联合研发 实验室爱奇艺、中国联通北 京公司联合测试，通 过奇速播落地5G-CPE/WiFi场景，提供VR视频的极致播 放体验爱奇艺携手中国移动， 以奇遇VR一体机为观看终端，实现爱奇 艺世界大会5G 8K全景直播爱奇艺与华为公司合 作完成5G-MEC与视 频CDN融合部署测试， 直播、VR等各类应用端到端时延15ms 以内

4、案例:爱奇艺世界大会8K全景直播端边云是指，将传统云计算、存储的 功能下沉到边进行弹性部署，将端上 的一些计算功能上浮到边，实现轻客 户端。以此满足超高清、多机位视频上传、 制作、剪辑、存储、分发所需要的大带宽、高计算、低时延需求。面向5G的端边云技术架构传统信号回传方式专线卫星4G背包案例:爱奇艺世界大会8K全景直播VR视频演示目录5G视频时代的思考与实践VR设备观影与传统观影方式的关系VR设备观影的技术挑战8K VR视频直播解决方案VR设备观影与传统观影方式的关系VR设备观影与传统观影方式的关系屏幕尺寸，以FOV(视场角)粗略衡量清晰度，以PPI(平面视频，每英寸像素个数)/PPD(球面视

5、频，每度像素个数)粗略衡量流畅度，以FPS(帧率)粗略衡量屏幕尺寸清晰度流畅度沉浸感VR设备观影与传统观影方式的关系PPI-6PPI-18Agustsson, Eirikur and Timofte, Radu, NTIRE 2017 Challenge on Single Image Super-Resolution: Dataset and Study, The IEEE Conference on Computer Vision and Pattern Recognition (CVPR) Workshops, July.2017VR设备观影与传统观影方式的关系VR设备观影当PPD达到6

6、0(人眼视网膜极限)时观看清晰度最高11G.L.Fain and E.John, Dowling.”Intracellular recordings from single rods and cones in the mudpuppy retina”, Science, Vol.180,No4091,pp.1178-1181,Jul.1973VR设备观影与传统观影方式的关系硬件4K屏幕（单眼2K）、90度FOV可达到21.3PPD，由此得出对应播放内容的分辨率是7680 x3840 7680 x38401920 x1920VR设备观影与传统观影方式的关系需求很明确4K屏，要播放VR 8K内容才

7、搭配！目录5G视频时代的思考与实践VR设备观影与传统观影方式的关系VR设备观影的技术挑战8K VR视频直播解决方案VR设备观影的技术挑战最简单也是最原始的方法是整个视频全部传输，行不行？29491200个像素VR设备观影的技术挑战整个视频全部传输，第一个缺点是码率高ITU-RVR设备观影的技术挑战主流芯片解码能力是4K但是我们的目标是降低硬件门槛，让更多用户体验到优质的内容引用自 https:/products/snapdragon-835-mobile-platform整个视频全部传输，第二个缺点是终端芯片解码能力限制VR设备观影的技术挑战面积分辨率(8K)分辨率(16K)缺点球面(参考)4

8、R2ERP22R27680 x384015360 x7680空间冗余CubeMap32R2/25760 x384011520 x7680空间冗余EAC32R2/25760 x384011520 x7680空间冗余四棱锥2R2/23840 x19207680 x3840存储副本多四棱柱2R2/23840 x19207680 x3840存储副本多分块串流/现有方案的比较8K VR视频直播解决方案-爱奇艺分块串流方案面积分辨率(8K)分辨率(16K)缺点球面(参考)4R2ERP22R27680 x384015360 x7680空间冗余CubeMap32R2/25760 x384011520 x768

9、0空间冗余EAC32R2/25760 x384011520 x7680空间冗余四棱锥2R2/23840 x19207680 x3840存储副本多四棱柱2R2/23840 x19207680 x3840存储副本多分块串流/1920 x19203840 x3840现有方案的比较目录5G视频时代的思考与实践VR设备观影与传统观影方式的关系VR设备观影的技术挑战8K VR视频直播解决方案8K VR视频直播解决方案-爱奇艺分块串流方案分块串流，简单讲，是将视频画面分块，只传输部分画面到VR终端进行播放。分块串流关键技术编解码封装存储播放8K VR视频直播解决方案-爱奇艺分块串流方案编解码分层编码 基本层

10、 增强层分块编码只解码部分画面 分块自由组合解码 媒体描述信息空间坐标描述多路编码同步 自定义SEI多路解码同步 时戳对齐8K VR视频直播解决方案-爱奇艺分块串流方案编解码只解码视口内的分块8K VR视频直播解决方案-爱奇艺分块串流方案编解码当用户头部转动，及时更新分块集合8K VR视频直播解决方案-爱奇艺分块串流方案编解码可调整分块大小综合屏幕有效覆盖率和编解码效率8K VR视频直播解决方案-爱奇艺分块串流方案编解码轻量级操作分块自由组合成大的图像不是矩形怎么办？8K VR视频直播解决方案-爱奇艺分块串流方案编解码帧头信息相同运动矢量限制Slice/Tile8K VR视频直播解决方案-爱奇

11、艺分块串流方案编解码视频头信息的修改解析头信息替换句法元素生成新的头信息8K VR视频直播解决方案-爱奇艺分块串流方案编解码帧头信息的修改8K VR视频直播解决方案-爱奇艺分块串流方案编解码自定义SEI(辅助增强信息)标记，同步多路编码画面完全一致8K VR视频直播解决方案-爱奇艺分块串流方案封装moof：movie fragment box mdat：media data box8K VR视频直播解决方案-爱奇艺分块串流方案封装8K VR视频直播解决方案-爱奇艺分块串流方案存储减少请求次数QTP长连接多路复用 预推送8K VR视频直播解决方案-爱奇艺分块串流方案播放ViewPort分块集合计算基本层高优先级分块数据超时丢弃总结&展望总结5G