《基于5G网络的8K VR直播技术方案》由会员分享，可在线阅读，更多相关《基于5G网络的8K VR直播技术方案（41页珍藏版）》请在金锄头文库上搜索。
1、技术创新，变革未来基于5G网络的8K VR直播技术方案,一个小故事,爱奇艺AI虚拟主播 奈奈,奇遇2S VR一体机,爱奇艺 l 企业理念：悦享品质 l 企业愿景：做一家以科技创新为驱动的伟大娱乐公司 l 企业文化：集科技人才和创意人才的DNA为一体,目录,5G视频时代的思考与实践 VR设备观影与传统观影方式的关系 VR设备观影的技术挑战 8K VR视频直播解决方案,5G技术有望在视频领域最先发挥作用,5G时代，视频行业将面临新的发展机遇 移动流量已占互联网流量63.5%,5G时代将达到80% 移动视频流量每年增长45%,到2023年占总体移动数据流量的73% 相关预测，移动用户月平均流量将从2
2、019年的11.7GB增长到2028 年的84.4GB，视频将占到所有5G流量的80%,后期发展 随着基站数量、下游应用、终端数量增加，5G的广连接特性会发挥更大价值， 如：工业互联网应用、智慧城市等,2019年 5G初期 芯片、网络、终端、应用协同， 应用发展相对落后 视频类应用成熟度高，经济价值 大，依托5G提供超高清视频传输 通道，实现4K/8K/12K点播、直播， AR/VR/MR,互动视频等多种商业 模式,爱奇艺+5G,5G技术融合视频场景,视频品质,内容创作,等应用，引爆新的屏幕 需求,采编 5G超高速上传通道+边缘网络提供编解码 等计算能力，使内容创作更加灵活高效,点播 5G超高
3、带宽与内容下沉技术 会使在线视频品质进一步得 到提升：4K/8K/VR VR/AR 5G+MEC技术可以有效 支撑8K-VR 、VR 直播,AI 智能生产、智能分发、智能播放、 智能交互、智能变现,Live,直播 更高清晰、更多视角、更多互 动、更多想象,5G时代爱奇艺的实践 爱奇艺与中国移动、 中国电信和中国联通 三大运营商合作，探 索5G商用落地，建 立5G终端联合研发 实验室,爱奇艺、中国联通北 京公司联合测试，通 过奇速播落地5G- CPE/WiFi场景，提 供VR视频的极致播 放体验,爱奇艺携手中国移动， 以奇遇VR一体机为 观看终端，实现爱奇 艺世界大会5G 8K全 景直播,爱奇艺
4、与华为公司合 作完成5G-MEC与视 频CDN融合部署测试， 直播、VR等各类应 用端到端时延15ms 以内,案例:爱奇艺世界大会8K全景直播,端边云是指，将传统云计算、存储的 功能下沉到边进行弹性部署，将端上 的一些计算功能上浮到边，实现轻客 户端。 以此满足超高清、多机位视频上传、 制作、剪辑、存储、分发所需要 的大带宽、高计算、低时延需求。,面向5G的端边云技术架构,传统信号回传方式,专线,卫星4G背包,案例:爱奇艺世界大会8K全景直播,VR视频演示,目录,5G视频时代的思考与实践 VR设备观影与传统观影方式的关系 VR设备观影的技术挑战 8K VR视频直播解决方案,VR设备观影与传统观
5、影方式的关系,VR设备观影与传统观影方式的关系,屏幕尺寸，以FOV(视场角)粗略衡量,清晰度，以PPI(平面视频，每英寸像素个数)/ PPD(球面视频，每度像素个数)粗略衡量,流畅度，以FPS(帧率)粗略衡量,屏幕尺寸,清晰度,流畅度,沉浸感,VR设备观影与传统观影方式的关系,PPI-6,PPI-18,Agustsson, Eirikur and Timofte, Radu, NTIRE 2017 Challenge on Single Image Super-Resolution: Dataset and Study, The IEEE Conference on Computer Visi
6、on and Pattern Recognition (CVPR) Workshops, July.2017,VR设备观影与传统观影方式的关系,VR设备观影 当PPD达到60(人眼视网膜极限)时观看清晰度最高1,1G.L.Fain and E.John, Dowling.”Intracellular recordings from single rods and cones in the mudpuppy retina”, Science, Vol.180,No4091,pp.1178-1181,Jul.1973,VR设备观影与传统观影方式的关系,硬件4K屏幕（单眼2K）、90度FOV可达到2
7、1.3PPD，由此得出对应播放内容的分辨率是7680 x3840,7680 x384 0,1920 x192 0,VR设备观影与传统观影方式的关系,需求很明确,4K屏，要播放VR 8K内容才搭配！,目录,5G视频时代的思考与实践 VR设备观影与传统观影方式的关系 VR设备观影的技术挑战 8K VR视频直播解决方案,VR设备观影的技术挑战,最简单也是最原始的方法是整个视频全部传输，行不行？,29491200个像素,VR设备观影的技术挑战,整个视频全部传输，第一个缺点是码率高 ITU-R,VR设备观影的技术挑战,主流芯片解码能力是4K 但是我们的目标是降低硬件门槛，让更多用户体验到优质的内容,引用
8、自 ,整个视频全部传输，第二个缺点是终端芯片解码能力限制,VR设备观影的技术挑战,现有方案的比较,8K VR视频直播解决方案-爱奇艺分块串流方案,现有方案的比较,目录,5G视频时代的思考与实践 VR设备观影与传统观影方式的关系 VR设备观影的技术挑战 8K VR视频直播解决方案,8K VR视频直播解决方案-爱奇艺分块串流方案,分块串流，简单讲，是将视频画面分块，只传输部分画面到VR终端进行播放。 分块串流关键技术 编解码 封装 存储 播放,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,分层编码 基本层 增强层 分块编码 只解码部分画面 分块自由组合解码 媒体描述信息 空间坐标描述 多
9、路编码同步 自定义SEI 多路解码同步 时戳对齐,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,只解码视口内的分块,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,当用户头部转动，及时更新分块集合,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,可调整分块大小 综合屏幕有效覆盖率和编解码效率,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,轻量级操作 分块自由组合成大的图像 不是矩形怎么办？,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,帧头信息相同 运动矢量限制,Slice/Tile,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,视频头信
10、息的修改,解析头信息 替换句法元素 生成新的头信息,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,帧头信息的修改,8K VR视频直播解决方案-爱奇艺分块串流方案,编解码,自定义SEI(辅助增强信息)标记，同步多路编码画面完全一致,8K VR视频直播解决方案-爱奇艺分块串流方案,封装,moof：movie fragment box mdat：media data box,8K VR视频直播解决方案-爱奇艺分块串流方案,封装,8K VR视频直播解决方案-爱奇艺分块串流方案,存储,减少请求次数 QTP长连接 多路复用 预推送,8K VR视频直播解决方案-爱奇艺分块串流方案,播放,ViewPort分块集合计算 基本层高优先级 分块数据超时丢弃,总结&展望,总结 5G视频时代的思考与实践：爱奇艺端边云架构与实践 VR设备观影与传统观影方式的关系：球面视频 VR设备观影的技术挑战：传输、解码资源受限 8K VR视频直播解决方案：爱奇艺分块串流方案关键技术,总结&展望,展望,l 显示设备分辨率&内容分辨率持续提升 l 端边云的演进，持续提升视频观影体验和视频制作质量 l 尽管网络带宽提高、时延降低，降低码率的主题不会变 l 互动视频,
