基于AVS2的VR视频直播

北京大学 数字视频编解码技术国家工程实验室

图1 获奖证书

成果简介

全景视频是沉浸式VR内容的一种重要呈现形式，本成果研制的基于AVS2的VR视频直播系统，实现了4K全景视频从采集到实时拼接、编码和传输的全过程，为AVS2视频编码国家标准在4K超高清广播、IPTV等行业应用提供了技术支撑。

技术特色

技术特色1: 基于AVS2视频编码国家标准

AVS2是我国具有自主知识产权的新一代视频编码国家标准，和第一代AVS视频编码标准相比，AVS2编码效率提升一倍以上。团队针对AVS2编码标准，设计了一套高度并行的编码方案，提出了一系列的优化编码算法，可以实现10比特超高清视频实时编码，相比于参考软件提升上万倍的编码速度，相比于x265具有显著的性能优势。

技术特色2: 低延时的广播级码率控制

针对帧级并行编码架构，基于当前码流缓冲区状态及编码状态，结合图像内容特性与场景变化，设计了更加平滑的码率控制模型，能满足广播电视应用中码率均衡、缓冲区无溢出等要求，保证硬件解码器稳定流畅解码。

技术特色3: 实时全景拼接算法

全景视频拼接是VR视频的关键技术，视频拼接质量直接影响用户的沉浸感体验效果。针对全景拼接的对齐技术、亮度补偿技术、图像融合技术、拼接加速技术等进行深度优化，实现了4K视频的实时拼接处理。

应用展示

（1）基于AVS2的4K超高清电视广播

AVS2视频编码标准已成为我国广电行业标准（行标号：GY/T 299.1-2016）及国家标准（国标号: GB/T 33475.2-2016）。实验室研发的AVS2超高清编码器具有稳定、高性能的特点，目前正配合国家4K超高清产业部署全面推进AVS2的广播应用。

（2）VR全景视频直播

全景视频直播通过提供360度视角的视频，在体育赛事、旅游观光等领域可以给观众带来更高的沉浸感。由全景相机采集的多路视频，经拼接技术形成全景视频，再使用AVS2进行压缩，可在保持高质量的主观体验同时大幅度提升压缩效率。

团队介绍

北京大学 数字视频编解码技术国家工程实验室

National Engineering Laboratory for Video Technology, Peking University

实验室针对数字视频编码与系统技术，建立研究开发和实验平台，开展视频编码算法，编解码系统研究；针对重点行业应用和产业发展需要，建立高性能编码器开发平台、重大应用示范与系统集成平台、多媒体通信技术实验验证平台等支撑平台，并以支撑平台为基础加强与支持单位以及优势单位和地区开展合作研究，参与AVS、MPEG等视频编码标准的制定，建立完善的、具有自主知识产权的信源编码技术标准体系，实现技术辐射，为我国数字电视、多媒体通信、消费电子、宽带网络等发展提供基础支撑。

联系方式

马思伟    教授

电话：(010) 62756172

邮箱：swma@pku.edu.cn

地址：北京市海淀区颐和园路5号北京大学理科二号楼2728室

邮编：100871

主页：http://vcl.idm.pku.edu.cn/  或扫描下方二维码