快手K266Dec

最新推荐文章于 2023-04-26 08:01:11 发布
原创 最新推荐文章于 2023-04-26 08:01:11 发布 · 3w 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

简介

K266Dec是快手公司为ARM平台设计的VVC软件解码器，在JVET-V0070提案中有相关介绍。这款解码器是根据VVC标准从头设计的，支持VVC main profile的所有编码工具。

对于Android平台，在Huawei P40上，以单线程解码2K 8bit CTC码流速度能达到33fps，是VTM11.0解码器的4.11倍。

对于IOS平台，在iPhone 12 Pro Max上，以单线程解码2K 8bit CTC码流速度能达到94fps，是VTM11.0解码器的4.78倍。

K266Dec对安卓平台进行了高度优化，因为快手视频的浏览量里80-90%的来自安卓手机。

为了让VVC适配更多机型，必须保持较低的CPU使用率和功耗。K266Dec专注于ARM平台的缓存友好的流水线和高吞吐量SIMD优化。另一方面，K266Dec着重加强单线程解码能力，这会严重影响CPU实时利用率。

针对单线程解码场景，K266Dec主要优化下面几个内容：

  • ARM/NEON汇编：K266Dec充分利用ARM和NEON指令集，优化了计算密集型模块，例如CABAC解码、帧内/帧间预测、反变换、去方块滤波、SAO等。为了更充分利用单核CPU流水线，几乎对每个汇编函数都仔细设计了指令级别的流水线。

  • 缓存友好的流水线和低访存操作：K266Dec利用块间的多个本地信息共享缓冲区来避免从帧级内存访问信息从而降低cache的未命中率。K266Dec通过精细的内存分配和本地操作来最小化解码的访存操作。

对于解码复杂度更高的场景，例如4K分辨率视频的解码，K266Dec充分利用多核CPU的资源，在Huawei P40上，对于class A的序列，4线程解码比单线程可以达到3.45倍的加速比。对于多线程解码的优化如下：

  • 细粒度并行：除了传统的帧级和波前并行，K266Dec还使用了细粒度的并行。一个CTU的解码过程被分为多个子阶段：解析，模式生成，重建、滤波等。这样，K266Dec可以极大的减少数据依赖，提高吞吐量。

实验结果

实验使用的码流可以分为两类：JVET CTC序列和Kwai App的UGC序列。Kwai的UGC序列都是720x1280的分辨率，都是选自Kwai App上用户上传的热门视频，浏览量从800k到2M。

JVET CTC的码流使用VTM11.0编码，配置如下：

  • 位深为8bit

  • 禁用ALF/CCALF

  • 其他配置使用RA配置文件

Kwai UGC码流生成使用如下配置：

  • 位深为8bit

  • 恒定主观质量的码率控制，平均比特率低于2Mbps

  • 禁用GEO / BDOF / SbTMVP / DMVR / LMCS / CIIP / MIP / JCCR / SBT / LFNST / MTS

  • 禁用ALF/CCALF

  • 其他配置使用RA配置文件

安卓平台速度测试

使用下面三款安卓设备测试K266Dec的解码速度，

高端：Huawei P40

  • Chipset: Kirin 990 5G (7 nm)

  • CPU: Octa-core (2x2.86 GHz Cortex-A76 & 2x2.36 GHz Cortex-A76 & 4x1.95 GHz Cortex-A55)

  • Memory: 8GB RAM

中端：Oppo R17

  • Chipset: Qualcomm Snapdragon 439 (10 nm)

  • CPU: Octa-core (4x1.95 GHz Cortex-A53 & 4x1.45 GHz Cortex A53)

  • Memory：4GB RAM

低端：Vivo Y93s

  • Chipset: MediaTek MT6762 Helio P22 (12 nm)

  • CPU: Octa-core 2.0 GHz Cortex-A53

  • Memory：4GB RAM

以下表1~3是K266Dec相比于VTM11.0的平均解码速度。相比于VTM11.0，K266Dec在Huawei P40上单线程解码能达到3.89倍的加速比。

表4显示K266Dec在 Huawei P40, Oppo R17 和Vivo Y93上使用ARM单核，对于UGC序列解码速度分别能达到97fps，41fps和19fps。

IOS平台速度测试

IOS测试设备选择iPhone 12 Pro Max，配置如下：

  • Chipset: Apple A14 Bionic (5 nm)

  • CPU: Hexa-core (2x3.1 GHz Firestorm + 4x1.8 GHz Icestorm)

  • Memory: 6GB RAM

在CTC码流上，K266Dec单线程解码加速比可达到4.66倍。

感兴趣的请关注微信公众号Video Coding
 

​

超详细的 Python 方法、函数总结
棒棒编程修炼场
05-17 7万+
目录阅读前必读（不看会错过一个亿）一、字符串操作1.1 capitalize() 方法——字符串首字母转换为大写1.2 casefold() 方法——所有大写字符转换为小写1.3 center() 方法——字符串居中填充1.4 count() 方法——统计字符串出现次数1.5 encode() 方法——编码字符串1.6 decode() 方法——解码字符串1.7 endswith() 方法——是否以指定子字符串结尾、startswith() 方法1.8 find() 方法——字符串首次出现的索引位置(rfi
【Codecs系列】H.266/VVC视频编码标准(十)：熵编码
优快云明星博主，认证博客专家，视频、Matlab领域优质创作者。
10-13 1445
DATE： 2020.10.13 文章目录1. 句法表示2. CABAC2.1. 核心的CABAC引擎2.2. 变换系数的残差编码2.3. 变换残差的上下文模型 1. 句法表示 采用固定长度（FLC）和可变长编码（VLC）的句法: 高层句法 参数集，slice片段头 SEI信息 固定长度码，指数哥伦比码 采用算术编码的句法： Slice层， CTU层 基于上下文的自适应编码 旁路编码 2. CABAC CABAC的处理流程： 1、 二值化 2、 上下文模型的选择 3、 二进制算术编码 与
快手智能处理与编码算法产品化之路
LiveVideoStack
04-26 1134
视频转码过程中涉及方方面面的视频图像算法，如何将算法有机地结合起来，打造成为行业领先的视频转码算法产品？通过多年的业务场景打磨和积累，快手音视频走出了一条自己的产品化之路。LiveVideoStackCon 2022北京站邀请到了快手视频图像算法引擎负责人陈宇聪，为我们介绍视频图像引擎Atlas和智能转码算法框架CAPE的发展历程，以及「质臻影音」「质臻轻流」等转码产品的推出和应用。文/陈宇聪编辑...
H.266/VVC视频编码：CTC提案和测试条件以及配置文件
B_gorgeous的博客
10-18 4716
在看JVET提案的时候经常会看到All Intra(AI)、Random access、Lowdelay P等，自己刚接触视频编码所以不太懂这些是什么，就试着上网找找资料总结一下： 一、CTC提案和测试条件 首先提供一个JVET提案的网址：http://phenix.int-evry.fr/jvet/ 找到JVET-J1010这篇提案，即：JVET common test conditions and software reference configurations，这篇文档定义了在第10次JVET会议之
视频播放相关的网络协议
水牛阿贵
11-08 4095
视频相关的协议有很多，不同的公司，甚至有自己的协议标准。本文尽量涵盖目前常见的视频相关的协议。 1，RTSP/RTP/RTCP协议族 本协议族是最早的视频传输协议。其中RTSP协议用于视频点播的会话控制，例如发起点播请求的SETUP请求，进行具体播放操作的PLAY、PAUSE请求，视频的跳转也是通过PLAY请求的参数支持的。而RTP协议用于具体的视频数据流的传输。RTCP协议中的C是控制的意思
快手智能视频图像编码处理服务架构
LiveVideoStack
02-11 2182
正文字数：9639 阅读时长：14分钟本文来自于快手视频算法工程师团队负责人闻兴在LiveVideoStackCon2020北京站上的精彩分享。凭借本主题演讲，闻兴老师荣获此次大会评选的...
精选资源
华为OptiXstar K662c-20V500R021C00SPC102
07-11
华为OptiXstar K662c-20V500R021C00SPC102 电信整合版固件,解决LAN互通问题~!
【浙江专用】2014届高三生物一轮复习（基础巩固+能力提升+挑战自我）专讲专练 第26讲 神经系统的结构与功能A（含详解）
08-19
10. 根据图 K266，刺激⑤会直接影响中肌肉和右肌肉，但由于神经—肌肉接头与突触类似，兴奋会沿神经纤维传递至左肌肉，所以左、中、右肌肉都会收缩。 11. 英语听力主要涉及大脑的听觉中枢，而非韦尼克区（主要负责...
视频、音频编解码技术大体介绍：
weixin_30802171的博客
11-06 973
视频、音频编解码技术： （1）无声FLC （2）有声、可看avi （3）兼顾容量与质量mpeg MJPEG的编码质量是相当高的，是一种以质量为最高要求的编码，它是非线性系统 因此它会在编码过程中尽量使用抖动算法（也可 以设置不抖动），以模拟真彩的效果。这种算法在色彩值差距不是很大的情况下几乎可以达到乱真的地步， 自然界中的声音非常复杂，波形极其复杂，通常我们采用的是脉冲代码调制编...
VVC/VTM：VTM运行编解码参数配置
Moomin的博客
05-12 5534
根据下面的博文下载VVC参考软件：https://blog.youkuaiyun.com/baidu_28446365/article/details/80308724 其中cfg文件夹中包含如下内容 其中蓝色框中的分别为AI、LDP、LDB、RA模式下的配置文件，主要对不同情况下的运行参数进行规定（包括工具的开关、尺寸的大小、量化参数等）； 红色框中是每个视频序列的配置文件，主要对视频序列的信息进行说明，...
快手高性能移动端多媒体引擎架构
音视频开发进阶
11-11 3827
当前，越来越多的用户选择使用手机进行视频创作，随着视频UGC时代的到来，用户不再满足于简单地视频拍摄，更希望一些专业的剪辑功能在移动端实现。在计算性能非常有限的情况，要实...
新一代视频编解码标准H266正式公布！
嵌入式与人工智能
07-16 8881
近日，新一代国际视频编解码标准（H.266/VVC）正式出炉，其中VVC是JVET（Joint Video Exploration Team）在2018年4月10日美国圣地亚会议上正式得名的（Versatile Video Coding）。 H.266/VVC目标是全面超越上一代标准H.265/HEVC，提供更高的压缩性能。从目前的情况看H.266/VVC方案的目标，已经圆满的达成了。相对于H.265/HEVC，新一代国际视频编解码标准（H.266/VVC）能够在不影响主观质量的情况下，将压缩比例提高了5
视频中的比特率
weixin_33994429的博客
02-11 307
比特率是指每秒传送的比特(bit)数。单位为bps(BitPerSecond)，比特率越高，传送的数据越大。bitrate = filesize / duration * 8码率和质量成正比，但是文件体积也和码率成正比。码率超过一定数值，对图像的质量没有多大影响。 转载于:https://blog.51cto.com/eachcan/1357889...
通过切比雪夫神经网络实现柔性航天器的主动姿态容错跟踪控制.zip
最新发布
12-18
1.版本：matlab2014a/2019b/2024b 2.附赠案例数据可直接运行。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
可用于离线/内网安装docker
12-18
可用于离线/内网安装docker
野火IM PC 客户端，支持Windows、MacOS，Linux，支持国产操作系统和国产CPU
12-18
根据原作 https://pan.quark.cn/s/0ed355622f0f 的源码改编 野火IM解决方案 野火IM是专业级即时通讯和实时音视频整体解决方案，由北京野火无限网络科技有限公司维护和支持。 主要特性有：私有部署安全可靠，性能强大，功能齐全，全平台支持，开源率高，部署运维简单，二次开发友好，方便与第三方系统对接或者嵌入现有系统中。 详细情况请参考在线文档。 主要包括一下项目： 野火IM Vue Electron Demo，演示如何将野火IM的能力集成到Vue Electron项目。 前置说明 本项目所使用的是需要付费的，价格请参考费用详情 支持试用，具体请看试用说明 本项目默认只能连接到官方服务，购买或申请试用之后，替换，即可连到自行部署的服务 分支说明 ：基于开发，是未来的开发重心 ：基于开发，进入维护模式，不再开发新功能，鉴于已经终止支持且不再维护，建议客户升级到版本 环境依赖 mac系统 最新版本的Xcode nodejs v18.19.0 npm v10.2.3 python 2.7.x git npm install -g node-gyp@8.3.0 windows系统 nodejs v18.19.0 python 2.7.x git npm 6.14.15 npm install --global --vs2019 --production windows-build-tools 本步安装windows开发环境的安装内容较多，如果网络情况不好可能需要等较长时间，选择早上网络较好时安装是个好的选择 或参考手动安装 windows-build-tools进行安装 npm install -g node-gyp@8.3.0 linux系统 nodej...
采用薄层法（TLM）的半解析模型预测铁路响应.zip
12-18
1.版本：matlab2014a/2019b/2024b 2.附赠案例数据可直接运行。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。
机组组合基于Benders分解算法解决混合整数规划问题-机组组合问题（Matlab代码实现）
12-18
【机组组合】基于Benders分解算法解决混合整数规划问题——机组组合问题（Matlab代码实现）
ACM-ICPC/CCPC/XCPC算法竞赛资料kmeans聚类
12-18
ACM-ICPC/CCPC/XCPC算法竞赛资料kmeans聚类
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值