技术系列课回顾 | 直播点播窄带高清之 JND 感知编码技术

 

 

导读：本文整理自网易资深开发工程师程玲在线上直播 MCtalk Live#3:直播点播窄带高清之 JND 感知编码技术内容分享，文末也可查看直播回顾视频。

文｜程玲 网易云信资深音视频引擎开发工程师

直播点播已经与日常生活息息相关，这个过程中大家最关注的是什么，是更低的播放成本？还是更高的画质？这就涉及到了窄带高清技术，对于视频窄带高清技术，智能视频编码是其中最基础也是最重要的一个部分。

 

窄带高清技术概述

窄带高清技术实际上是一套以人眼的主观感受最优为基准的视频编码技术，代表的是一种成本与体验最合理配置、最佳性价比的视频服务理念。窄带是指节省不必要的比特，高清是把比特分配到更能产生价值的地方，从而实现在同样带宽条件下收获更加清晰优质的画质。

在疫情的影响下，直播从传统秀场渗透到各个领域，全民直播时代到来，对窄带高清技术的需求也越来越大。本文将首先介绍下业界一些比较成熟的窄带高清方案，再分享网易云信在窄带高清技术上的探索实践，最后再分享其关键技术点 JND 感知编码技术。

 

业界窄带高清方案简介

业界已经有比较成熟的窄带高清技术的应用，下面将介绍一些典型的技术方案。

 淘宝直播 

淘宝直播是采用 HEVC 编码实现了 720p/25fps,800kbps 的压缩，且 PSNR>43db/VMAF>90，其视频窄带高清技术主要应用有三个方面：

• 音视频增强，采用基于 AI 的图像增强、美颜和语音增强来提高生产质量

• 感知处理，采用信源信道联合自适应编码，包括 ROI 检测、根据场景分类设置不同的编码参数、智能码控等

• S265 编码器，S265 编码器是业界领先的 HEVC 编码器

 阿里窄带高清 

阿里的窄带高清方案是从人眼视觉模型出发，将编码器的优化目标从经典的“保真度最高”调整为“主观体验最好”。凭借独有算法，弱化人眼易忽视的区域，强化人眼关注的细节，修复人眼厌恶的内容，突破当代视频编码器的能力上限，在节省码率的同时，也能提供更加清晰的观看体验。

 腾讯极速高清 

腾讯极速高清是采用视频智能类(视频分成游戏、秀场、体育、户外、动漫、美食、影视剧等十几个大类几十个小类场景)、智能编码参数(不同场景配置不同最优编码参数)、前置处理 （锐化、软模糊、去块、降噪）等技术尽可能解决转码失真、低分辨率模糊、镜头抖动、噪声大、低码率锯齿块等转码中存在的问题，应用在斗鱼、企鹅电竞、CCTV、新英体育等。

 

<