h.266

H.266/VVC VTM阅读2-CU预测信息编码

  本文以bcw索引为例，记录VTM中CU预测信息编码的过程。进行决策时一种调用顺序是:  EncSlice::compressSlice()->  EncSlice::encodeCtus()->  EncCu::xCompressCU()->  EncCu::xCheckRDCostInter()->  EncCu::xEncodeInterResidual()->  InterSearch:
heweiqiran·2020-07-07 09:00

H.264/AVC, H.265/HEVC, H.266/VVC技术对比整理-编码结构和块划分

1、H.264/AVC编码结构1.1GOP  H.264编码首先将视频序列分为若干个GOP（GroupofPicture），GOP第一帧为IDR（即时解码刷新）帧，IDR帧必为I帧。H.264中所有GOP独立解码，不会互相参考，称为封闭GOP。(图片来自博客HEVC中GOP参数说明)1.2slice  GOP由若干帧组成，每帧可以划分为多个slice(条)。每个slice独立编码，使得编码可以并行
heweiqiran·2020-07-07 09:00

H.266/VVC技术描述_2-帧内预测_4-MDIS、MRL、ISP

1、MDIS-ModeDependentIntraSmoothing  帧内模式的角度预测模式的参考像素可能不是整数位置，HEVC中当参考像素点位于两个参考像素之间时使用了2抽头线性插值得到预测值，也就是2个点加权平均，距离更近的点权重更大。VVC中对角度模式使用MDIS进行平滑处理。首先根据是否指向整数位置，将角度模式分为3类，垂直和水平模式为A类，可以被45度整除的为B类，剩余为C类。  对于
heweiqiran·2020-07-07 09:00

H.266/VVC技术描述_4-变换-高频调零, 多核变换MST, 子块变换SBT, 二次变换LFNST

1、高频调零  VTM中最大支持64x64的变换块。VTM中可以在SPS配置允许的最大的变换块，可以是16、32或64。  对于DCT-2，高或宽为64的块进行高频调零。如果宽为64，仅保留左32列，如果高为64，仅保留上32列。使用变换的skip模式时不使用高频调零。对于DCT8和DST7，高或宽为32的块进行高频调零，只保留16x16的区域。2、多核变换MTS  DCT变换在数学上有8类，一般
heweiqiran·2020-07-07 09:00

H.266/VVC技术描述_3-帧间预测_4-DMVR

1、DMVR技术  DMVR(Decodersidemotionvectorrefinement)是为了提高merge模式的预测准确率，在解码端对运动矢量MV进行调整。在双向预测中，根据初始MV，在参考列表L0和L1中进行搜索，比较两个参考像素块的差，得到调整后的MV。如下图中，计算初始参考块周围的块，计算两个参考帧中两个参考块的SAD(SumofAbsoluteDifferences)，SAD最
heweiqiran·2020-07-07 09:00

H.266/VVC技术描述_7-熵编码

1、CABAC引擎  CABAC是一种算术编码，依靠概率区间进行编码，对于二进制算术编码，只需要指定两个概率。HEVC中定义了大概率符号MPS和小概率符号LPS，根据情况分别代指0和1。假设给定区间R，将RLPS定义为下一个符号为LPS的区间，RLPS长度为RPLPS，RMPS长度为R-RLPS。RPLPS的值通过查表获得，R有4个值，P有64个值，所以需要一个64x4x8比特的表。通过当前概率值
heweiqiran·2020-07-07 09:00

H.266/VVC技术描述_2-帧内预测_1-预测模式与宽角度预测

1、帧内预测模式  VVC将HEVC的33种角度模式扩展为了65种，另外还有DC模式和planar模式，共67种模式。DC模式与planar模式与HEVC相同。这些预测模式会应用到所有size的块。下图中用红色标出了VVC新增的模式。  在VTM中，一些非方形块的传统的角度模式会被自适应替换为宽角度模式。HEVC中的编码块都是方形且边长为2的指数，因此计算DC模式时候可以不使用除法(用移位代替)。
heweiqiran·2020-07-07 09:59

H.266编解码标准发布：清晰度不变、数据量减半

本周，FraunhoferHHI正式宣布了下一代视频编解码标准H.266/VCC（VersatileVideoCoding），并得到行业伙伴苹果、爱立信、Intel、华为、微软、高通和索尼的支持，该标准的制定已经进行了
itwriter·2020-07-07 08:00

H.266中的多核变换

在HEVC标准中基本上仅仅使用DCT2作为变换核，只在帧内4*4的块的亮度分量使用了DST变换，而H.266的多核变换技术引入了更多的选择，新引入了DST7，DCT8,DCT5，DST1，目前仅仅帧间保留了
double_s_c·2020-07-07 07:41

H.266中的扫描顺序总结

1.Raster扫描：即从左到右，从上到下2.Z-扫描（不同于zigzag扫描）：对于任何一个边长为偶数的正方形来说，都先扫描左上角，再是右上角，然后是左下角，最后是右下角，如下图的数字增大顺序所示。3.垂直扫描：从变换块的最后一个系数开始扫描，终止于DC系数，在每个小块内从下到上，从右到左扫描；4.水平扫描：从变换块的最后一个系数开始扫描，终止于DC系数，在每个小块内从右到左，从下到上扫描，块之
小小柴·2020-07-07 06:20

H.266新参考软件VTM中的数据结构

从今天开始研究新的266的参考软件啦----VTM，先来看看新代码中的数据结构。在以前的HM中，有三个很重要的数据结构，分别为TComDataCU,TComTU,TComPicYuv;TComDataCU----存储编码信息；表示一个CU或者CTU；图像位置到编码信息的的映射；TComTU----允许更简单的TU结构指引的对象；不包含实际的数据；TComPicYuv----储存视频信号；在新的测试
小小柴·2020-07-07 06:20

H.266的帧内技术之多参考行帧内预测（MRL）

在刚刚结束的十月份的会议中，H.266的帧内技术采纳了多参考行帧内预测技术（MRL）。该技术现在还不能看到具体的代码，所以有些细节还不是很清楚，所以先讲个大概的过程。
小小柴·2020-07-07 06:20

H.266/VVC代码学习28:Dependent Quantization

好久没看266的代码，感觉太难懂了，各种变量各种类，也没有个注释，只能抱着读书百遍其义自现的真理一遍一遍debug，最后大部分看懂了，有些不懂的以后有机会慢慢补。今天记录的是vvc中的新工具，dependentquantization。先上点简单的原理：依赖量化器的方法的实现如下所示：定义两个不同重建水平的标量量化器定义一个两个标量量化器之间的切换过程这两个标量量化器用q1,q2表示。可用的重建水
小小柴·2020-07-07 06:49

H.266/VVC相关技术学习笔记9：JVET——O次会议关于色度预测模式编码的一些修改

在这次的O次会议中，关于色度预测模式的熵编码部分的修改就有好几家提案，其中这几家的修改方案都是重合的。总共有以下四家单位：海康威视（Hikvision）、索尼（Sony）、大疆（DJI）、北京大学（Peking）。其中大疆和北京大学联合提案O0416，他们认为在使用CCLM预测时，色度预测模式的解析过程存在依赖性，导致硬件设计延迟。为了消除色度CCLM预测分析过程的这种依赖关系，他们针对目前VTM
wD丶路人·2020-07-06 23:19

H.266/VVC相关技术学习笔记8：JVET——O次会议提案O0320：CCLM simplification

之前的VTM5.0版本中的CCLM已经简化为只选用四个点，详细的技术细节在之前的博客已经介绍过啦：H.266/VVC代码学习笔记3：带你解析VTM5.0中CCLM的代码实现细节本次会议对该技术进行简化和统一
wD丶路人·2020-07-06 23:19

H.266/VVC代码学习笔记8：VTM5.0中帧内亮度预测函数——estIntraPredLumaQT()函数

今天对VTM5.0中的亮度帧内预测的入口函数estIntraPredLumaQT()进行详细的学习estIntraPredLumaQT中完成了亮度分量的帧内预测，其主要流程如下：一、初始化各种参数。二、为了减少最终RDcost的次数，降低编码端的复杂度，VVC的VTM5.0版本默认使用帧内快速搜索算法，主要经过两轮的SATD的粗选阶段和一轮RDcost的细选阶段 1、第一轮的SATD粗选，首先对3
wD丶路人·2020-07-06 23:18

H.266/VVC代码学习笔记2 ：深入解析帧内色度预测模式的编码方式及其代码详解

之前的博客中我详细的讲解了关于视频编码中熵编码部分的具体的技术细节H.266/VVC代码学习笔记5：VTM4.0中的熵编码CABAC部分的详细解析今天就来具体的讲一下在帧内色度预测模式中的熵编码具体是怎么编码的
wD丶路人·2020-07-06 23:18

H.266/VVC相关技术学习笔记2：N次会议有关MPM列表的所有提案大汇总

在N次会议开会之前先预先看了一下所有上传的有关MPM列表的提案，今天抽出时间把之前总结的内容再重新梳理一遍一、N0134SimplificationofMPMderivation单位：ETRI(ElectronicsandTelecommunicationsResearchInstitute)Title：CE3:SimplificationofMPMderivation(CE3-3.2)1）对CE
wD丶路人·2020-07-06 23:18

H.266/VVC相关技术学习笔记4：HEVC和VVC中块划分的差别

关于H.265/HEVC和H.266/VVC中的块划分的区别：一、HEVC中首先需要将一个图像固定划分为多个CTU。
wD丶路人·2020-07-06 23:18

H.266/VVC相关技术学习笔记20：帧间预测技术中的MMVD技术（Merge mode with MVD）

今天介绍一下帧间预测技术中的MMVD技术（MergemodewithMVD）,也称带有运动矢量差的融合技术，MMVD也属于基于Merge的技术中的一种，在解码端的语法元素中也属于Merge分支。不过我觉着按严格来讲，MMVD并不属于Merge系列，而更像是inter系列，因为MMVD是要传送MVD到解码端，就这一点来看，MMVD就已经不在Merge范围之内了。下面我来讲解一下MMVD的技术细节吧。
wD丶路人·2020-07-06 23:18

环路滤波（三）：VVC去方块滤波改进

H.266/VVC中去方块滤波改进VVC中，去方块滤波和HEVC过程类似，主要有以下几个方面改进：滤波强度依赖于重建像素的平均亮度级。tc表有了扩展。亮度强滤波有了改进。增加了色度强滤波。
Dillon2015·2020-07-06 21:53

H.266/VVC技术学习：帧内预测之PDPC技术

1、PDPC介绍PDPC技术，即Positiondependentintrapredictioncombination，其原理是将未滤波的边界参考像素和根据滤波后的参考像素得到的帧内预测值结合起来得到最终的帧内预测值。PDPC技术主要应用于planar模式（模式0），DC模式（模式1），垂直模式（模式50），水平模式（模式18），左下角对角线模式和与其相邻的8个模式（模式2~10），右上角对角线模
涵小呆·2020-07-06 21:20

H.266/VVC代码学习：DC模式和Planar模式

Planar模式和DC模式时两种特殊的角度模式，分别对应于模式号0和1。一、DC模式DC模式适用于大面积平坦区域，其预测值是通过计算左边和（或）上边参考像素的平均值获得的。1.1、计算DC模式预测值的计算和块的形状有关：当宽等于高时，用左侧参考像素和上边参考像素的平均值作为预测值填充整个块当宽大于高时，用上边参考像素的平均值作为预测值填充整个块当宽小于高时，用左侧参考像素的平均值作为预测值填充整个
涵小呆·2020-07-06 21:20

H.266/VVC技术学习：帧内预测之MIP技术

MatrixWeightedIntraPrediction（MIP）技术，即矩阵加权帧内预测技术，是VVC中新增加的一种帧内预测技术。其最初的思想来源于基于神经网络的帧内预测技术（JVET-J0037），即利用多层神经网络基于相邻已重建像素预测当前pu像素值。但是这种预测方式复杂度太高，经过权衡，发展出最后采纳的基于线性仿射变换的帧内预测技术。Trackingroute:N0217->M0043-
涵小呆·2020-07-06 21:20

H.266/VVC技术学习：帧内预测之MRL技术

Multiplereferenceline(MRL)intrapredictionH.266/VVC中，进行帧内预测时，允许使用多参考行。在下图中，描绘4条参考行的示例，其中SegmentA和SegmentF不是由重建像素获得的，而是分别用SegmentB和SegmentE最近的像素填充获得的。在HEVC中只允许使用使用参考行0，在VVC中，除了可以使用参考行0，还可以使用参考行1、2（MRL），
涵小呆·2020-07-06 21:20

H.266/VVC技术学习：帧内预测之ISP技术

IntraSub-Partitions(ISP)ISP技术就是根据块形状将亮度预测块垂直或者水平划分为2个或者4个子分区。ISP技术应用的最小块尺寸为8x4和4x8，最大尺寸为64x64。由于VVC限制分区内至少有16个样点，对于8x4和4x8的块，ISP将其划分为2个子分区，对于更大的块，将其划分为四个子分区。块尺寸子块数量4x4不划分4x8、8x42其他4a)Examplesofsub-par
涵小呆·2020-07-06 21:20

H.266/VVC技术学习：帧内预测之角度预测模式

帧内预测之角度预测为了捕捉自然视频中呈现的任意边缘方向，VVC中的帧内传统角度预测模式数从HEVC中使用的33个扩展到65个。在下图中，VVC中的新的角度预测模式被描绘成红色虚线箭头，并且planar和DC模式保持不变。H.265/HEVCH.266/VVC在HEVC中，每个帧内编码块都是正方形的且每边的长度是2的幂，因此，使用DC模式进行帧内预测时不需要除法运算。在VVC中，帧内编码块可以是矩形
涵小呆·2020-07-06 21:20

H.266/VVC代码学习：帧内预测之参考像素获取及滤波

帧内预测首先需要获取参考像素并对参考像素进行滤波。VTM7.0中，initIntraPatternChType函数是获取参考像素和对参考像素滤波的入口函数，主要包含三步：获取参考像素长度获取参考像素对参考像素进行滤波代码如下：//forceRefFilterFlag表示对参考像素强制滤波标志voidIntraPrediction::initIntraPatternChType(constCodin
涵小呆·2020-07-06 21:48

H.266/VVC代码学习：帧内预测之角度预测函数(predIntraAng、xPredIntraAng)

VTM7.0中，帧内预测的角度预测的入口函数为predIntraAng函数，该函数主要是用于进行传统的帧内预测（Planar、DC、角度预测），然后对Planar和DC模式使用PDPC（其余角度模式的PDPC在xPredIntraAng函数中进行）voidIntraPrediction::predIntraAng(constComponentIDcompId,PelBuf&piPred,const
涵小呆·2020-07-06 21:48

H.266/VVC代码学习：xIntraCodingTUBlock函数

xIntraCodingTUBlock函数主要是进行帧内编码并计算相应的失真，用于上层函数对最佳预测模式和最佳变换模式的选择。xIntraCodingTUBlock函数流程如下：初始化使用模式进行预测并保存预测信号由预测信号和原始信号获得残差信号进行变换和量化进行反变换重建更新失真distortion代码如下所示：//帧内编码TUblockvoidIntraSearch::xIntraCoding
涵小呆·2020-07-06 21:15

VVC学习之一：VVC/H.266的简介及VTM的使用方法

前言跟JVET以及VVC标准已经有一段时间了，准备写一些VVC的一些学习心得，主要也是锻炼一下自己，如果有理解不对的地方，希望各位大佬不吝赐教。VVC的发展历程VVC是从HEVC发展而来，其目标是将HEVC/H.265的编码性能提高一倍，计划在2020年10月发布标准最终版，其官方标准测试模型VTM目前已经发展到4.0版本（对应JVET第14次会议JVET-N）。在确定新一代编码标准为VVC（通用
Aidoneus_y·2020-07-06 18:46

【视频编码学习】H.266/VVC参考软件VTM配置运行(VTM-6.0版本)

运行环境、软件版本等说明：VTM：6.0版本操作系统：Win1064位操作系统IDE：VisualStudio2017编译器：Cmake1、VTM下载地址https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM左侧点击Files，然后中间下拉列表可以选择VTM的不同历史版本进行下载，这里我选择的是6.0版本，然后点击右侧的下载按钮即可根据自己的要求下
Lemon丶tea·2020-07-06 17:34

VVC提案下载地址

JVET负责研发、维护JEM（H.266）测试平台与360Lib（全景投影）测试平台。会议/技术提
_Fighting_Girl·2020-07-06 17:12

一、H.266新增技术

H.266的提案：http://phenix.it-sudparis.eu/jvet/VVC（VersatileVideoCoding）：https://jvet.hhi.fraunhofer.de/H
perom·2020-07-06 17:27

H.266变换编码：信号决定变换SDT

SDT代码学习：http://blog.csdn.net/lin453701006/article/details/79158700在JEM中，变化编码的改进可以分为两个阶段，如下图。第一阶段是使用自适应多核变换AMT（http://blog.csdn.net/lin453701006/article/details/79026631）或信号决定变换SDT的主变换，两者通过率失真优化进行选择。第二
岳麓吹雪·2020-07-06 17:14

H.266/VVC技术描述_1-块划分

1、CTU划分  与HEVC类似，视频帧首先被划分为CTU(CodingTreeUnits)，包括一个亮度块和两个色度块。CTU的亮度块最大允许128x128(最大的亮度变换块是64x64)。图1CTU划分示例2、划分为slices,tiles,bricks  一帧图片可以划分为多个tile。tile是一个矩形区域，包含一组CTU。一个tile可以划分为多个brick，每个brick包含一些CTU
heweiqiran·2020-07-06 16:59

H.266/VVC VTM阅读12-残差编码

1、EncCu::xEncodeInterResidual()  帧间预测的模式决策过程中，常用的率失真决策一个流程是：设置模式参数->按此模式进行帧间预测（运动补偿）->编码模式信息与残差->计算码率r->计算重建误差d->计算率rdcost并判断是否使用此模式。VTM中将编码模式信息与残差及其后续部分封装到函数xEncodeInterResidual()中。xEncodeInterResidu
heweiqiran·2020-07-06 16:59

VVC/H.266 项目文件的生成及有用网址

H.266/VVC视频编码技术小小柴的博客VVCSoftware_VTM下载地址生成项目文件VVC与HEVC不同，从上述链接下载下来的参考软件并不包含build文件夹，需要使用cmake生成项目文件。
_VioletHan_·2020-07-06 15:35

H.266/VVC代码学习:MIP技术相关代码之predIntraMip函数

predIntraMip函数是进行MIP预测的入口函数，主要功能是进行矩阵乘法运算，再通过上采样获得整个块的预测像素，实现步骤如下图所示：predIntraMip代码及注释如下#ifJVET_R0350_MIP_CHROMA_444_SINGLETREEvoidMatrixIntraPrediction::predBlock(int*constresult,constintmodeIdx,cons
涵小呆·2020-07-06 15:51

H.266/VVC代码学习:MIP技术相关代码之initIntraMip函数

initIntraMip函数主要是对参考像素进行下采样并为MIP矩阵乘法准备输入数据，函数结构如下：MIP根据块尺寸可以分为以下三种情况：块尺寸下采样后的边界长度m_reducedBdrySize矩阵乘法输出边界长度m_reducedPredSizemipSizeId=04x424mipSizeId=14xN、Nx4、8x844mipSizeId=2其余块48initIntraMip函数主要是准备
涵小呆·2020-07-06 15:51

H.266/VVC代码学习：MPM列表建立

VVC具有67种角度模式，如果分别对每个PU的预测模式进行编码，则对于67种模式需要7比特来编码，因此VVC中也采用了构建最可能模式列表（mostprobablemode，MPM）的方法。在图像和视频编码中，相邻块通常具有较强的相关性，因此相邻块的帧内预测模式相同或者相似的概率较大，因此MPM列表基于左相邻PU和上相邻PU的帧内预测模式构建的，在VVC中，其MPM列表的长度为6。在帧内编码中，MP
涵小呆·2020-07-06 15:50

H.266/VVC代码学习：初始化块扫描顺序

H.266/VVC的块扫描顺序包括对角扫描、水平扫描和垂直扫描顺序（以4x4块为例）///coefficientscanningtypeusedinACS//系数扫描类型enumCoeffScanType
涵小呆·2020-07-06 15:50

H.266/VVC代码学习：依赖性标量量化(Dependent scalar quantization)

VVC的量化模块使用了一个新技术：依赖性标量量化（Dependentscalarquantization）。依赖标量量化是指变换系数的一组可容许的重构值依赖于在重构顺序中位于当前变换系数级(transformcoefficientlevel)之前的变换系数级的值。与HEVC中使用的传统独立标量量化相比，该方法的主要影响是允许的重建向量在N（N表示变换块中变换系数的数量）维向量空间中更密集。这意味着
涵小呆·2020-07-06 15:50

H.266/VVC代码学习:MIP技术相关代码

MIP技术原理介绍：https://blog.csdn.net/BigDream123/article/details/104939645MIP的相关函数代码在estIntraPredLumaQT函数中首次被调用，如下代码所示，其中initIntraMip函数用于对参考像素进行下采样，为MIP矩阵乘法准备输入数据getNumModesMip函数根据当前块的尺寸获取不同的MIP模式数目predInt
涵小呆·2020-07-06 15:18

H.266/VVC的编码结构和块划分

一、将一帧图像划分成CTUsVVC中一帧图像分成许多编码树单元（CTU）。CTU的概念与HEVC的相同。对于一帧具有三通道的图像，CTU由一个N×N的亮度样本块和两个相应的色度样本块组成。图1显示了一个图片被划分为CTU的示例。在VVC中为了适应4k、8k等视频编码的需要，CTU中的亮度块的最大允许尺寸被指定为128×128（HEVC是64×64），注意亮度变换块的最大尺寸为64×64。Figur
涵小呆·2020-07-06 14:06

【七】 H.266/VVC中 带有运动矢量差的融合技术(MMVD)

一、前言在VVC的扩展merge模式当中，当前CU生成的mergelist中选择一个率失真代价值最小的候选项直接作为自己的运动信息，而MMVD是将候选项的运动信息作为自己MV的预测值，最终编码对象为实际获得的MV与该预测值之间的差值(MVD)MMVD技术起源于之前提案中的ultimatemotionvectorexpression（UMVE）技术，该技术是一种新的运动向量表示方法，在skip和me
Cohen_ina·2020-07-06 06:42

【八】 H.266/vvc中对称MVD模式（SMVD）

一、前言对称MVD模式（symmetricMVDmode,SMVD）是VVC提出的一种双向预测时MVD语法单元传输模式。在使用对称MVD模式，传输双向预测信息时不需要传list0和list1中参考图像的索引和list1的MVD，这些运动信息可以在解码端生成。关于list0和list1的解释：参考图像列表0和参考图像列表1二、对称MVD模式（symmetricmotionvectordifferen
Cohen_ina·2020-07-06 06:42

H.266/VVC代码学习笔记5：VTM4.0中的熵编码CABAC部分的详细解析

之前一直对视频编码中熵编码CABAC这一块不是太清楚其中的细节，今天来从CABAC的原理以及从VTM4.0的代码中详细解析CABAC的工作流程，相信对于不了解视频编码中CABAC的人和有一定基础的人来说都有很大的收获。1CABAC工作流程1.1算术编码工作流程与变长编码不同，算术编码的本质是为整个输入序列分配一个码字，而不是给每个字符分别指定码字，因此平均意义上可以为单个字符分配码长小于1的码字，
wD丶路人·2020-07-01 12:13

H.266/VVC代码学习笔记1：VTM5.0的下载和安装简单而实用的教程

今年的五月初，H.266/VVC的新一代的参考软件–VTM5.0终于发布了那么有些刚接触会议的同学可能还不会这个参考软件的配置过程，那么今天我就详细来讲一下VTM5.0的配置教程，对于之前版本的VTM也可参照同样的方法进行配置配置之前需要下载两样东西
wD丶路人·2020-07-01 12:41

H.266/VVC相关技术学习笔记26：VTM6.0版本中的DMVR（解码端运动矢量细化）

时隔一个多月，今天接着之前的JEM中的DMVR技术，详细讲讲在目前VTM6.0中的DMVR技术细节，并且对比一下两个版本中DMVR的不同之处，之所以今天又做了一篇，是因为本人老师最近让我详细了解一下DMVR技术，然后在看代码的过程中，并结合网上大神的博客，我才发现之前将JEM中的做法和VTM中的做法给搞混了，因此之前那篇博客实际上写的是JEM中的DMVR，但是标题写成了VTM6.0中的DMVR，这
wD丶路人·2020-07-01 12:41
上一页 1 2 3 4 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他