HK40076016A - 视频编解码方法、装置、计算机可读介质及电子设备 - Google Patents
视频编解码方法、装置、计算机可读介质及电子设备Info
- Publication number
- HK40076016A HK40076016A HK42022064445.4A HK42022064445A HK40076016A HK 40076016 A HK40076016 A HK 40076016A HK 42022064445 A HK42022064445 A HK 42022064445A HK 40076016 A HK40076016 A HK 40076016A
- Authority
- HK
- Hong Kong
- Prior art keywords
- block
- quantization
- coefficients
- coefficient
- quantized
- Prior art date
Links
Description
技术领域
本申请涉及计算机及通信技术领域,具体而言,涉及一种视频编解码方法、装置、计算机可读介质及电子设备。
背景技术
相关技术中提出了SIBC(Symmetrical Intra Block Copy,对称的帧内块复制)技术,即在编码过程中,对当前块的参考块进行水平翻转或竖直翻转得到预测块(该过程可以称之为预测块的重构处理过程)。在这种情况下,需要在码流中进行显式索引的编码,以指示是否采用SIBC,且在采用SIBC时,进一步通过显式索引指示翻转方式,但是这种通过编码显式索引的方式显然降低了编码效率。
发明内容
本申请的实施例提供了一种视频编解码方法、装置、计算机可读介质及电子设备,进而至少在一定程度上可以提高视频的编解码效率。
本申请的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本申请的实践而习得。
根据本申请实施例的一个方面,提供了一种视频解码方法,包括:对采用帧内块复制模式的编码块进行解码处理,得到所述编码块对应的量化系数块和块矢量;对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果;根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式;根据所述重构处理方式对所述块矢量指向的参考块进行处理,得到所述编码块对应的预测块。
根据本申请实施例的一个方面,提供了一种视频编码方法,包括:对当前待编码块的参考块进行重构处理,得到预测块;根据所述当前待编码块和所述预测块计算残差数据,对所述残差块进行变换或跳过变换处理,以及进行量化处理得到量化系数块;对所述量化系数块中的量化系数进行调整,以基于调整后的量化系数的统计结果隐含指示由所述参考块生成所述预测块的重构处理方式;对所述当前待编码块与所述参考块之间的块矢量,以及量化系数调整后的量化系数块进行编码,得到编码后的码流。
根据本申请实施例的一个方面,提供了一种视频解码装置,包括:解码单元,配置为对采用帧内块复制模式的编码块进行解码处理,得到所述编码块对应的量化系数块和块矢量;统计单元,配置为对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果;第一处理单元,配置为根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式;第二处理单元,配置为根据所述重构处理方式对所述块矢量指向的参考块进行处理,得到所述编码块对应的预测块。
在本申请的一些实施例中,基于前述方案,所述统计单元配置为:计算所述指定区域内的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果。
在本申请的一些实施例中,基于前述方案,所述统计单元配置为:将所述指定区域内的量化系数的数值进行线性映射,计算所述指定区域内的量化系数在线性映射之后的数值或绝对值之和,将得到的和值作为所述量化系数统计结果,其中,所述线性映射包括:
将所述指定区域内数值为奇数的量化系数的数值转换为第一数值,将数值为偶数的量化系数的数值转换为第二数值,其中,所述第一数值和所述第二数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的非零量化系数的数值转换为第三数值,将数值为零的量化系数的数值转换为第四数值,其中,所述第三数值和所述第四数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的量化系数的数值减少或增加第五数值;或
将所述指定区域内的量化系数的数值乘以或除以非零的第六数值;或
将所述指定区域内的量化系数的数值乘以或除以非零偶数。
在本申请的一些实施例中,基于前述方案,所述指定区域包括以下区域中的至少一个:
所述量化系数块中的全部区域;
所述量化系数块中指定的一个位置或多个位置;
所述量化系数块中指定的至少一行;
所述量化系数块中指定的至少一列;
所述量化系数块中指定的至少一行和指定的至少一列;
所述量化系数块中处于至少一条斜线上的位置;
所述量化系数块中的扫描区域系数编码SRCC区域;
所述SRCC区域中指定的一个位置或多个位置;
所述SRCC区域中指定的至少一行;
所述SRCC区域中指定的至少一列;
所述SRCC区域中指定的至少一行和指定的至少一列;
所述SRCC区域中处于至少一条斜线上的位置。
在本申请的一些实施例中,基于前述方案,所述SRCC区域中指定的一个位置或多个位置包括:按照扫描顺序的前N个位置或按照扫描顺序处于中间的N个位置,N为非0的自然数。
在本申请的一些实施例中,基于前述方案,所述第一处理单元配置为:若所述量化系数统计结果是奇数,则确定所述重构处理方式为第一处理方式;若所述量化系数统计结果是偶数,则确定所述重构处理方式为第二处理方式。
在本申请的一些实施例中,基于前述方案,所述第一处理单元配置为:计算所述量化系数统计结果针对设定值的余数;根据余数与重构处理方式之间的对应关系,选择与所述量化系数统计结果针对设定值的余数相对应的重构处理方式。
在本申请的一些实施例中,基于前述方案,所述余数与重构处理方式之间的对应关系是根据所述余数的取值,基于可选的重构处理方式进行预先设定的。
在本申请的一些实施例中,基于前述方案,所述视频解码装置还包括:第三处理单元,配置为在得到所述量化系数块之后,确定所述量化系数块中的量化系数是否全为0;若所述量化系数块中的量化系数不全为0,则由所述统计单元执行对所述量化系数块中指定区域内的量化系数进行统计的过程;若所述量化系数块中的量化系数全为0,则通过解码得到的显式索引确定所述重构处理方式。
在本申请的一些实施例中,基于前述方案,所述重构处理方式包括以下至少一种:是否是扩展的帧内块复制模式;扩展的帧内块复制模式中的水平翻转处理;扩展的帧内块复制模式中的竖直翻转处理。
在本申请的一些实施例中,基于前述方案,所述第一处理单元还配置为:根据以下方式中的至少一种确定对应的编码块是否需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式:视频图像帧序列对应的编码块的序列头中包含的索引标识的取值;视频图像帧对应的编码块的图像头中包含的索引标识的取值;编码块的尺寸大小。
根据本申请实施例的一个方面,提供了一种视频编码装置,包括:第四处理单元,配置为对当前待编码块的参考块进行重构处理,得到预测块;第五处理单元,根据所述当前待编码块和所述预测块计算残差数据,对所述残差块进行变换或跳过变换处理,以及进行量化处理得到量化系数块;调整单元,配置为对所述量化系数块中的量化系数进行调整,以基于调整后的量化系数的统计结果隐含指示由所述参考块生成所述预测块的重构处理方式;编码单元,配置为对所述当前待编码块与所述参考块之间的块矢量,以及量化系数调整后的量化系数块进行编码,得到编码后的码流。
根据本申请实施例的一个方面,提供了一种计算机可读介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例中所述的视频编码方法或视频解码方法。
根据本申请实施例的一个方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如上述实施例中所述的视频编码方法或视频解码方法。
根据本申请实施例的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各种可选实施例中提供的视频编码方法或视频解码方法。
在本申请的一些实施例所提供的技术方案中,通过对采用帧内块复制模式的编码块进行解码处理,得到编码块对应的量化系数块和块矢量,然后对量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果,并根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式,使得能够通过量化系数块中的量化系数来隐含指示参考块生成预测块的重构处理方式,无需编码端在码流中进行显式索引的编码,进而可以有效提高视频编解码效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1示出了可以应用本申请实施例的技术方案的示例性系统架构的示意图;
图2示出视频编码装置和视频解码装置在流式传输系统中的放置方式示意图;
图3示出了一个视频编码器的基本流程图;
图4示出了通过SRCC技术标记出的扫描区域;
图5示出了对标记出的扫描区域进行扫描的顺序示意图;
图6示出了帧间预测的示意图;
图7示出了帧内块复制的示意图;
图8示出了SIBC中参考块与预测块之间的关系示意图;
图9示出了根据本申请的一个实施例的视频解码方法的流程图;
图10示出了根据本申请的一个实施例的指定区域的划分方式示意图;
图11示出了根据本申请的一个实施例的指定区域的划分方式示意图;
图12示出了根据本申请的一个实施例的指定区域的划分方式示意图;
图13示出了根据本申请的一个实施例的视频编码方法的流程图;
图14示出了根据本申请的一个实施例的视频解码装置的框图;
图15示出了根据本申请的一个实施例的视频编码装置的框图;
图16示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本申请将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。
此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本申请的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本申请的技术方案而没有特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知方法、装置、实现或者操作以避免模糊本申请的各方面。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。
需要说明的是:在本文中提及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
图1示出了可以应用本申请实施例的技术方案的示例性系统架构的示意图。
如图1所示,系统架构100包括多个终端装置,所述终端装置可通过例如网络150彼此通信。举例来说,系统架构100可以包括通过网络150互连的第一终端装置110和第二终端装置120。在图1的实施例中,第一终端装置110和第二终端装置120执行单向数据传输。
举例来说,第一终端装置110可对视频数据(例如由终端装置110采集的视频图片流)进行编码以通过网络150传输到第二终端装置120,已编码的视频数据以一个或多个已编码视频码流形式传输,第二终端装置120可从网络150接收已编码视频数据,对已编码视频数据进行解码以恢复视频数据,并根据恢复的视频数据显示视频图片。
在本申请的一个实施例中,系统架构100可以包括执行已编码视频数据的双向传输的第三终端装置130和第四终端装置140,所述双向传输比如可以发生在视频会议期间。对于双向数据传输,第三终端装置130和第四终端装置140中的每个终端装置可对视频数据(例如由终端装置采集的视频图片流)进行编码,以通过网络150传输到第三终端装置130和第四终端装置140中的另一终端装置。第三终端装置130和第四终端装置140中的每个终端装置还可接收由第三终端装置130和第四终端装置140中的另一终端装置传输的已编码视频数据,且可对已编码视频数据进行解码以恢复视频数据,并可根据恢复的视频数据在可访问的显示装置上显示视频图片。
在图1的实施例中,第一终端装置110、第二终端装置120、第三终端装置130和第四终端装置140可为服务器、个人计算机和智能电话,但本申请公开的原理可不限于此。本申请公开的实施例适用于膝上型计算机、平板电脑、媒体播放器和/或专用视频会议设备。网络150表示在第一终端装置110、第二终端装置120、第三终端装置130和第四终端装置140之间传送已编码视频数据的任何数目的网络,包括例如有线和/或无线通信网络。通信网络150可在电路交换和/或分组交换信道中交换数据。该网络可包括电信网络、局域网、广域网和/或互联网。出于本申请的目的,除非在下文中有所解释,否则网络150的架构和拓扑对于本申请公开的操作来说可能是无关紧要的。
在本申请的一个实施例中,图2示出视频编码装置和视频解码装置在流式传输环境中的放置方式。本申请所公开主题可同等地适用于其它支持视频的应用,包括例如视频会议、数字TV(television,电视机)、在包括CD、DVD、存储棒等的数字介质上存储压缩视频等等。
流式传输系统可包括采集子系统213,采集子系统213可包括数码相机等视频源201,视频源创建未压缩的视频图片流202。在实施例中,视频图片流202包括由数码相机拍摄的样本。相较于已编码的视频数据204(或已编码的视频码流204),视频图片流202被描绘为粗线以强调高数据量的视频图片流,视频图片流202可由电子装置220处理,电子装置220包括耦接到视频源201的视频编码装置203。视频编码装置203可包括硬件、软件或软硬件组合以实现或实施如下文更详细地描述的所公开主题的各方面。相较于视频图片流202,已编码的视频数据204(或已编码的视频码流204)被描绘为细线以强调较低数据量的已编码的视频数据204(或已编码的视频码流204),其可存储在流式传输服务器205上以供将来使用。一个或多个流式传输客户端子系统,例如图2中的客户端子系统206和客户端子系统208,可访问流式传输服务器205以检索已编码的视频数据204的副本207和副本209。客户端子系统206可包括例如电子装置230中的视频解码装置210。视频解码装置210对已编码的视频数据的传入副本207进行解码,且产生可在显示器212(例如显示屏)或另一呈现装置上呈现的输出视频图片流211。在一些流式传输系统中,可根据某些视频编码/压缩标准对已编码的视频数据204、视频数据207和视频数据209(例如视频码流)进行编码。
应注意,电子装置220和电子装置230可包括图中未示出的其它组件。举例来说,电子装置220可包括视频解码装置,且电子装置230还可包括视频编码装置。
在本申请的一个实施例中,以国际视频编码标准HEVC(High Efficiency VideoCoding,高效率视频编码)、VVC(Versatile Video Coding,多功能视频编码),以及中国国家视频编码标准AVS为例,当输入一个视频帧图像之后,会根据一个块大小,将视频帧图像划分成若干个不重叠的处理单元,每个处理单元将进行类似的压缩操作。这个处理单元被称作CTU(Coding Tree Unit,编码树单元),或者称之为LCU(Largest Coding Unit,最大编码单元)。CTU再往下可以继续进行更加精细的划分,得到一个或多个基本的编码单元CU(Coding Unit,编码单元),CU是一个编码环节中最基本的元素。
以下介绍对CU进行编码时的一些概念:
预测编码(Predictive Coding):预测编码包括了帧内预测和帧间预测等方式,原始视频信号经过选定的已重建视频信号的预测后,得到残差视频信号。编码端需要为当前CU决定选择哪一种预测编码模式,并告知解码端。其中,帧内预测是指预测的信号来自于同一图像内已经编码重建过的区域;帧间预测是指预测的信号来自已经编码过的、不同于当前图像的其它图像(称之为参考图像)。
变换及量化(Transform&Quantization):残差视频信号经过DFT(DiscreteFourier Transform,离散傅里叶变换)、DCT(Discrete Cosine Transform,离散余弦变换)等变换操作后,将信号转换到变换域中,称之为变换系数。变换系数进一步进行有损的量化操作,丢失掉一定的信息,使得量化后的信号有利于压缩表达。在一些视频编码标准中,可能有多于一种变换方式可以选择,因此编码端也需要为当前CU选择其中的一种变换方式,并告知解码端。量化的精细程度通常由量化参数(Quantization Parameter,简称QP)来决定,QP取值较大,表示更大取值范围的系数将被量化为同一个输出,因此通常会带来更大的失真及较低的码率;相反,QP取值较小,表示较小取值范围的系数将被量化为同一个输出,因此通常会带来较小的失真,同时对应较高的码率。
熵编码(Entropy Coding)或统计编码:量化后的变换域信号将根据各个值出现的频率进行统计压缩编码,最后输出二值化(0或者1)的压缩码流。同时,编码产生其他信息,例如选择的编码模式、运动矢量数据等,也需要进行熵编码以降低码率。统计编码是一种无损的编码方式,可以有效的降低表达同样信号所需要的码率,常见的统计编码方式有变长编码(Variable Length Coding,简称VLC)或者基于上下文的二值化算术编码(ContentAdaptive Binary Arithmetic Coding,简称CABAC)。
基于上下文的二值化算术编码(CABAC)过程主要包含3个步骤:二值化、上下文建模和二进制算术编码。在对输入的语法元素进行二值化处理后,可以通过常规编码模式和旁路编码模式(Bypass Coding Mode)对二元数据进行编码。旁路编码模式无须为每个二元位分配特定的概率模型,输入的二元位bin值直接用一个简单的旁路编码器进行编码,以加快整个编码以及解码的速度。一般情况下,不同的语法元素之间并不是完全独立的,且相同语法元素自身也具有一定的记忆性。因此,根据条件熵理论,利用其他已编码的语法元素进行条件编码,相对于独立编码或者无记忆编码能够进一步提高编码性能。这些用来作为条件的已编码符号信息称为上下文。在常规编码模式中,语法元素的二元位顺序地进入上下文模型器,编码器根据先前编码过的语法元素或二元位的值,为每一个输入的二元位分配合适的概率模型,该过程即为上下文建模。通过ctxIdxInc(context index increment,上下文索引增量)和ctxIdxStart(context index Start,上下文起始索引)即可定位到语法元素所对应的上下文模型。将bin值和分配的概率模型一起送入二元算术编码器进行编码后,需要根据bin值更新上下文模型,也就是编码中的自适应过程。
环路滤波(Loop Filtering):经过变化及量化的信号会通过反量化、反变换及预测补偿的操作获得重建图像。重建图像与原始图像相比由于存在量化的影响,部分信息与原始图像有所不同,即重建图像会产生失真(Distortion)。因此,可以对重建图像进行滤波操作,例如去块效应滤波(Deblocking filter,简称DB)、SAO(Sample Adaptive Offset,自适应像素补偿)或者ALF(Adaptive Loop Filter,自适应环路滤波)等滤波器,可以有效降低量化所产生的失真程度。由于这些经过滤波后的重建图像将作为后续编码图像的参考来对将来的图像信号进行预测,因此上述的滤波操作也被称为环路滤波,即在编码环路内的滤波操作。
在本申请的一个实施例中,图3示出了一个视频编码器的基本流程图,在该流程中以帧内预测为例进行说明。其中,原始图像信号sk[x,y]与预测图像信号做差值运算,得到残差信号uk[x,y],残差信号uk[x,y]经过变换及量化处理之后得到量化系数,量化系数一方面通过熵编码得到编码后的比特流,另一方面通过反量化及反变换处理得到重构残差信号u'k[x,y],预测图像信号与重构残差信号u'k[x,y]叠加生成图像信号图像信号一方面输入至帧内模式决策模块和帧内预测模块进行帧内预测处理,另一方面通过环路滤波输出重建图像信号s'k[x,y],重建图像信号s'k[x,y]可以作为下一帧的参考图像进行运动估计及运动补偿预测。然后基于运动补偿预测的结果s'r[x+mx,y+my]和帧内预测结果得到下一帧的预测图像信号并继续重复上述过程,直至编码完成。
此外,由于残差信号在经过变换和量化处理后的量化系数块中非零系数较大概率会集中在块的左边和上方区域,而块的右边和下方区域往往为0,因此引入了SRCC技术中,通过SRCC技术可以标记出每个量化系数块(尺寸为W×H)中包含的非零系数的左上区域的大小SRx×SRy,其中SRx是量化系数块中最右面的非零系数的横坐标,SRy是量化系数块中最下面的非零系数的纵坐标,且1≤SRx≤W,1≤SRy≤H,而该区域外的系数均为0。SRCC技术利用(SRx,SRy)来确定一个量化系数块中需要扫描的量化系数区域,如图4所示,只有(SRx,SRy)标记的扫描区域内的量化系数需要编码,编码的扫描顺序如图5所示,可以是从右下角到左上角的反向Z字型扫描。
基于上述的编码过程,在解码端针对每一个CU,在获取到压缩码流(即比特流)之后,进行熵解码获得各种模式信息及量化系数。然后量化系数经过反量化及反变换处理得到残差信号。另一方面,根据已知的编码模式信息,可获得该CU对应的预测信号,然后将残差信号与预测信号相加之后即可得到重建信号,重建信号再经过环路滤波等操作,产生最终的输出信号。
目前主流的视频编码标准(如HEVC、VVC、AVS3),均采用基于块的混合编码框架。具体是将原始的视频数据分成一系列的编码块,结合预测、变换和熵编码等视频编码方法,实现视频数据的压缩。其中,运动补偿是视频编码常用的一类预测方法,运动补偿基于视频内容在时域或空域的冗余特性,从已编码的区域导出当前编码块的预测值。这类预测方法包括:帧间预测、帧内块复制预测、帧内串复制预测等,在具体的编码实现中,可能单独或组合使用这些预测方法。对于使用了这些预测方法的编码块,通常需要在码流中显式或隐式的编码一个或多个二维的位移矢量,指示当前块(或当前块的同位块)相对它的一个或多个参考块的位移。
需要注意的是,在不同的预测模式及不同的实现下,位移矢量可能有不同的名称,本申请的实施例中统一按照以下方式进行描述:1)帧间预测中的位移矢量称为运动位移矢量(Motion Vector,简称MV);2)帧内块复制中的位移矢量称为块位移矢量(Block Vector,简称BV);3)帧内串复制中的位移矢量称为串位移矢量。
如图6所示,帧间预测利用视频时间域的相关性,使用邻近已编码图像的像素预测当前图像的像素,以达到有效去除视频时域冗余的目的,能够有效节省编码残差数据的比特。其中,P表示当前帧,Pr表示参考帧,B表示当前编码块,Br表示B的参考块。B'在参考帧中的坐标与B在当前帧中的坐标位置相同,Br的坐标为(xr,yr),B'的坐标为(x,y),当前编码块与其参考块之间的位移称为运动向量(即MV),其中,MV=(xr-x,yr-y)。
帧内块复制(Intra Block Copy,简称IBC)是HEVC屏幕内容编码(Screen ContentCoding,简称SCC)扩展中采纳的一种编码工具,它显著提升了屏幕内容的编码效率。在AVS3和VVC中,也采纳了IBC技术以提升屏幕内容编码的性能,IBC利用屏幕内容视频在空间的相关性,使用当前图像上已编码图像的像素预测当前待编码块的像素,能够有效节省编码像素所需的比特。如图7所示,在IBC中当前块与其参考块之间的位移称为块位移矢量(BlockVector,简称BV)。H.266/VVC采用了类似于帧间预测BV技术进一步节省编码BV所需的比特。
SIBC的处理过程如图8所示,在编码过程中,对参考块进行水平翻转或竖直翻转得到预测块,该过程可以称之为预测块的重构处理过程。并且在编码过程中,需要编码sibc_flag和sibc_dir_flag,sibc_flag用于指示编码块是否采用了SIBC,如果采用了SIBC,则通过sibc_dir_flag指示具体的翻转方式,显然这种通过编码显式索引的方式降低了编解码效率。基于此,本申请实施例的技术方案提出了通过量化系数块中的量化系数来隐含指示参考块生成预测块的重构处理方式,无需编码端在码流中进行显式索引的编码,进而可以有效提高视频编解码效率。
以下对本申请实施例的技术方案的实现细节进行详细阐述:
图9示出了根据本申请的一个实施例的视频解码方法的流程图,该视频解码方法可以由具有计算处理功能的设备来执行,比如可以由终端设备或服务器来执行。参照图9所示,该视频解码方法至少包括步骤S910至步骤S940,详细介绍如下:
在步骤S910中,对采用帧内块复制模式的编码块进行解码处理,得到编码块对应的量化系数块和块矢量。
在本申请的一个实施例中,视频图像帧序列包括了一系列图像,每张图像可以被进一步划分为条带(Slice),条带又可以划分为一系列的LCU(或CTU),LCU包含有若干CU。视频图像帧在编码时是以块为单位进行编码处理,在一些新的视频编码标准中,比如在H.264标准中有宏块(macroblock,MB),宏块可进一步划分成多个可用于预测编码的预测块(prediction)。在HEVC标准中,采用编码单元CU、预测单元(prediction unit,PU)和变换单元(transform unit,TU)等基本概念,从功能上划分了多种块单元,并采用全新的基于树的结构进行描述。比如CU可以按照四叉树划分为更小的CU,而更小的CU还可以继续划分,从而形成一种四叉树结构。本申请实施例中的编码块可以是CU,或者是比CU更小的块,如对CU进行划分得到的更小的块。
在本申请的一个实施例中,对采用帧内块复制模式的编码块进行解码处理,得到编码块对应的量化系数块即为残差数据的量化系数块。解码得到的块矢量即为当前编码块与参考块之间的BV。
在步骤S920中,对量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果。
在本申请的一个实施例中,对量化系数块中的指定区域内的量化系数进行统计时,可以采用如下的方式计算得到量化系数统计结果:
可以计算该指定区域内的量化系数的数值之和,将得到的和值作为量化系数统计结果;或者可以计算该指定区域内的量化系数的绝对值之和,将得到的和值作为量化系数统计结果;或者可以计算该指定区域内数值为奇数的量化系数的数值之和,将得到的和值作为量化系数统计结果;或者可以计算该指定区域内数值为奇数的量化系数的绝对值之和,将得到的和值作为量化系数统计结果;或者可以计算该指定区域内数值为偶数或非零偶数的量化系数的数值之和,将得到的和值作为量化系数统计结果;或者可以计算该指定区域内数值为偶数或非零偶数的量化系数的绝对值之和,将得到的和值作为量化系数统计结果。
在本申请的一个实施例中,对前述指定区域内的量化系数进行统计时,可以将该指定区域内的量化系数的数值进行线性映射,然后计算该指定区域内的量化系数在线性映射之后的数值或绝对值之和,将得到的和值作为量化系数统计结果。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内数值为奇数的量化系数的数值转换为第一数值,将数值为偶数的量化系数的数值转换为第二数值,其中,该第一数值和该第二数值中的一个为奇数,另一个为偶数。比如,将该指定区域内数值为奇数的量化系数的数值转换为1,将数值为偶数的量化系数的数值转换为0;或者将该指定区域内数值为奇数的量化系数的数值转换为0,将数值为偶数的量化系数的数值转换为1;或者将该指定区域内数值为奇数的量化系数的数值转换为3,将数值为偶数的量化系数的数值转换为2;或者将该指定区域内数值为奇数的量化系数的数值转换为2,将数值为偶数的量化系数的数值转换为3。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的非零量化系数的数值转换为第三数值,将数值为零的量化系数的数值转换为第四数值,其中,该第三数值和该第四数值中的一个为奇数,另一个为偶数。比如,将该指定区域内的非零量化系数的数值转换为1,将数值为零的量化系数的数值转换为0;或者将该指定区域内的非零量化系数的数值转换为0,将数值为零的量化系数的数值转换为1;或者将该指定区域内的非零量化系数的数值转换为3,将数值为零的量化系数的数值转换为2;或者将该指定区域内的非零量化系数的数值转换为2,将数值为零的量化系数的数值转换为3。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的量化系数的数值减少第五数值。比如将该指定区域内的量化系数的数值都减少1,或者减少2。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的量化系数的数值增加一个数值。比如将该指定区域内的量化系数的数值都增加1,或者增加2。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的量化系数的数值乘以非零的第六数值。比如将该指定区域内的量化系数的数值都乘以1,或者乘以2。可选地,该第六数值可以为非零偶数,比如2、4、6等。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的量化系数的数值除以非零的一个数值。比如将该指定区域内的量化系数的数值都除以1,或者除以2。可选地,该数值可以为非零偶数,比如2、4、6等。
在本申请的一个实施例中,上述的线性映射可以是将该指定区域内的量化系数的数值转换为相反数。
综上,本申请的实施例在对前述指定区域内的量化系数进行统计时可以有如下方式:
1、对指定区域内的量化系数的数值直接求和;
2、对指定区域内的量化系数求数值的绝对值之和;
3、对指定区域内数值为奇数的量化系数的数值直接求和;
4、对指定区域内数值为奇数的量化系数求数值的绝对值之和;
5、对指定区域内数值为偶数或非零偶数的量化系数的数值直接求和;
6、对指定区域内数值为偶数或非零偶数的量化系数求数值的绝对值之和;
7、先根据指定区域内的量化系数的奇偶性对奇数和偶数进行数值转换,然后对指定区域内转换后的所有数值求和;
8、先根据指定区域内的量化系数的奇偶性对奇数和偶数进行数值转换,然后对指定区域内转换后的所有数值的绝对值求和;
9、先根据指定区域内的非零量化系数和数值为零的量化系数进行数值转换,然后对指定区域内转换后的所有数值求和;
10、先根据指定区域内的非零量化系数和数值为零的量化系数进行数值转换,然后对指定区域内转换后的所有数值的绝对值求和;
11、先对指定区域内的所有量化系数进行增加、减少、乘以非零倍数、除以非零倍数或者求相反数等数值转换操作,然后对指定区域内转换后的所有数值求和;
12、先对指定区域内的所有量化系数进行增加、减少、乘以非零倍数、除以非零倍数或者求相反数等数值转换操作,然后对指定区域内转换后的所有数值的绝对值求和。
当然,还可以有其它方式,比如先通过前述7至12中的转换方式对指定区域内的量化系数进行数值转换,然后只对转换后的奇数或者偶数进行求和等。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中的全部区域。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中指定的一个位置或多个位置。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中指定的至少一行。如图10所示,假设量化系数块是4×4的系数块,每个方块表示一个量化系数,那么可以如图10中(a)所示,将灰色区域的1行作为指定区域;或者可以如图10中(b)所示,将灰色区域的2行作为指定区域。可选地,这至少一行可以是量化系数块中靠上边的行。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中指定的至少一列。如图10所示,假设量化系数块是4×4的系数块,每个方块表示一个量化系数,那么可以如图10中(c)所示,将灰色区域的1列作为指定区域;或者可以如图10中(d)所示,将灰色区域的2列作为指定区域。可选地,这至少一列可以是量化系数块中靠左边的列。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中指定的至少一行和指定的至少一列。如图11所示,假设量化系数块是4×4的系数块,每个方块表示一个量化系数,那么可以如图11中(a)所示,将下方的1行和右边的1列(即其中的灰色区域)作为指定区域;或者可以如图11中(b)所示,将下方的2行和右边的2列(即其中的灰色区域)作为指定区域;或者可以如图11中(c)所示,将上方的1行和左边的1列(即其中的灰色区域)作为指定区域;或者可以如图11中(d)所示,将上方的2行和左边的2列(即其中的灰色区域)作为指定区域。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中处于至少一条斜线上的位置。如图12所示,假设量化系数块是4×4的系数块,每个方块表示一个量化系数,那么可以如12中的(a)和(b)所示,将一条斜线上的位置作为指定区域;或者如12中的(c)和(d)所示,将两条斜线上的位置作为指定区域。
在本申请的一个实施例中,上述的指定区域可以是量化系数块中的SRCC区域。其中,SRCC区域即为通过SRCC技术标记出的扫描区域。
在本申请的一个实施例中,上述的指定区域可以是SRCC区域中指定的一个位置或多个位置。可选地,SRCC区域中指定的一个位置或多个位置可以包括:按照扫描顺序的前N个位置或者按照扫描顺序处于中间的N个位置,当然也可以是按照扫描顺序处于最后的N个位置等,N为非0的自然数。
在本申请的一个实施例中,上述的指定区域可以是SRCC区域中指定的至少一行。如图10所示,假设SRCC区域是4×4的系数块,每个方块表示一个量化系数,那么可以如图10中(a)所示,将灰色区域的1行作为指定区域;或者可以如图10中(b)所示,将灰色区域的2行作为指定区域。可选地,这至少一行可以是量化系数块中靠上边的行。
在本申请的一个实施例中,上述的指定区域可以是SRCC区域中指定的至少一列。如图10所示,假设SRCC区域是4×4的系数块,每个方块表示一个量化系数,那么可以如图10中(c)所示,将灰色区域的1列作为指定区域;或者可以如图10中(d)所示,将灰色区域的2列作为指定区域。可选地,这至少一列可以是量化系数块中靠左边的列。
在本申请的一个实施例中,上述的指定区域可以是SRCC区域中指定的至少一行和指定的至少一列。如图11所示,假设SRCC区域是4×4的系数块,每个方块表示一个量化系数,那么可以如图11中(a)所示,将下方的1行和右边的1列(即其中的灰色区域)作为指定区域;或者可以如图11中(b)所示,将下方的2行和右边的2列(即其中的灰色区域)作为指定区域;或者可以如图11中(c)所示,将上方的1行和左边的1列(即其中的灰色区域)作为指定区域;或者可以如图11中(d)所示,将上方的2行和左边的2列(即其中的灰色区域)作为指定区域。
在本申请的一个实施例中,上述的指定区域可以是SRCC区域中处于至少一条斜线上的位置。如图12所示,假设SRCC区域是4×4的系数块,每个方块表示一个量化系数,那么可以如12中的(a)和(b)所示,将一条斜线上的位置作为指定区域;或者如12中的(c)和(d)所示,将两条斜线上的位置作为指定区域。
在本申请的其它实施例中,也可以将上述实施例中的区域划分方式进行组合,以将组合后的区域作为指定区域。
在步骤S930中,根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。
在本申请的一个实施例中,重构处理方式可以包括以下至少一种:是否是扩展的帧内块复制模式;扩展的帧内块复制模式中的水平翻转处理(即对参考块进行水平翻转处理);扩展的帧内块复制模式中的竖直翻转处理(即对参考块进行竖直翻转处理);对参考块的旋转处理、对参考块的镜像处理、对参考块进行块内滤波处理、结合块外重建像素对参考块进行滤波处理、对参考块中的系数进行重排处理等。
需要说明的是:如果选择了多种重构处理方式,则这多种重构处理方式之间可以没有处理顺序的先后之分。
在本申请的一个实施例中,可以根据量化系数统计结果的奇偶性来隐含导出重构处理方式,比如若量化系数统计结果是奇数,则确定重构处理方式为第一处理方式;若量化系数统计结果是偶数,则确定重构处理方式为第二处理方式。
具体地,比如若量化系数统计结果是奇数,则隐含导出参考块生成预测块采用的是扩展的帧内块复制模式;若量化系数统计结果是偶数,则隐含导出参考块生成预测块采用的不是扩展的帧内块复制模式。
再如,若量化系数统计结果是奇数,则隐含导出参考块生成预测块采用的是扩展的帧内块复制模式中的水平翻转处理;若量化系数统计结果是偶数,则隐含导出参考块生成预测块采用的是扩展的帧内块复制模式中的竖直翻转处理。
在本申请的一个实施例中,可以计算量化系数统计结果针对设定值的余数,然后根据余数与重构处理方式之间的对应关系,选择与量化系数统计结果针对设定值的余数相对应的重构处理方式。该设定值可以是任意非零的数,比如可以是2、3、4、5等。可选地,余数与重构处理方式之间的对应关系是根据余数的取值,基于可选的重构处理方式进行预先设定的。
具体而言,比如设定值为2,那么可以设定余数0表示参考块生成预测块采用的是扩展的帧内块复制模式;余数1表示参考块生成预测块采用的不是扩展的帧内块复制模式。
再如,设定值为3,那么可以设定余数0表示参考块生成预测块采用的是扩展的帧内块复制模式中的水平翻转处理;余数1表示参考块生成预测块采用的是扩展的帧内块复制模式中的竖直翻转处理;余数2表示参考块生成预测块采用的是扩展的帧内块复制模式中的顺时针旋转90°处理。
在步骤S940中,根据重构处理方式对块矢量指向的参考块进行处理,得到编码块对应的预测块。
在本申请的一个实施例中,在得到编码块对应的预测块之后,可以将预测块和重建的残差数据进行组合,以生成重建的图像数据。
需要说明的是:如果解码得到的量化系数块中的量化系数全为0,那么无法通过统计量化系数块中的量化系数来隐含导出重构处理方式,在这种情况下,可以通过解码显式索引来确定重构处理方式。而在解码得到的量化系数块中的量化系数不全为0时,再通过前述实施例的技术方案对量化系数块中指定区域内的量化系数进行统计,以通过量化系数统计结果来隐含导出重构处理方式。
基于前述实施例的技术方案,在本申请的一个实施例中,可以根据以下方式中的至少一种确定对应的编码块是否需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式:
视频图像帧序列对应的编码块的序列头中包含的索引标识的取值;
视频图像帧对应的编码块的图像头中包含的索引标识的取值;
编码块的尺寸大小。
具体而言,在确定对应的编码块是否需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式时,可以有如下方式:
1、通过视频图像帧序列对应的编码块的序列头中的索引标识来指示。比如,若序列头中的索引标识为1(数值仅为示例),就说明视频图像帧序列对应的所有编码块需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。然后可以基于前述实施例的技术方案,对编码块解码得到的量化系数块中的量化系数进行统计,并根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。
2、通过视频图像帧对应的编码块的图像头中的索引标识来指示。比如,若图像头中的索引标识为1(数值仅为示例),就说明视频图像帧对应的所有编码块需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。然后可以基于前述实施例的技术方案,对编码块解码得到的量化系数块中的量化系数进行统计,并根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。
3、通过编码块的尺寸大小来指示。比如,若一个编码块的尺寸小于设定值,就说明该编码块需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。然后可以基于前述实施例的技术方案,对编码块解码得到的量化系数块中的量化系数进行统计,并根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。
4、通过上述方式1至方式3中的两种或两种以上方式来进行指示。
比如,可以通过视频图像帧序列对应的编码块的序列头中的索引标识、视频图像帧对应的编码块的图像头中的索引标识和编码块的尺寸大小来共同指示。具体地,若序列头中的索引标识为1(数值仅为示例)、图像头中的索引标识为1(数值仅为示例)、且该编码块的尺寸小于设定尺寸,那么就说明该编码块需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。然后可以基于前述实施例的技术方案,对编码块解码得到的量化系数块中的量化系数进行统计,并根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式。
在本申请的一个实施例中,由于现有标准中SIBC技术有两个标识位,即sibc_flag和sibc_dir_flag,因此在本申请的一个实施例中,可以通过两个指定区域内的量化系数统计结果,然后一个指定区域内的量化系数统计结果用于隐含导出sibc_flag的值(即是否是SIBC),另一个指定区域内的量化系数统计结果用于隐含导出sibc_dir_flag的值(即采用SIBC的哪种处理方式)。
当然,也可以如前述实施例中所述的方案,通过一个指定区域内的量化系数统计结果来隐含导出sibc_flag或者隐含导出sibc_dir_flag。具体而言,可以通过一个指定区域内的偶数系数个数的奇偶性来隐含导出sibc_dir_flag,比如若该指定区域内的偶数系数个数为奇数,则隐含导出sibc_dir_flag的值为1(仅为示例,也可以是0);若该指定区域内的偶数系数个数为偶数,则隐含导出sibc_dir_flag的值为0(仅为示例)。
图13示出了根据本申请的一个实施例的视频编码方法的流程图,该视频编码方法可以由具有计算处理功能的设备来执行,比如可以由终端设备或服务器来执行。参照图13所示,该视频编码方法至少包括步骤S1310至步骤S1340,详细介绍如下:
在步骤S1310,对当前待编码块的参考块进行重构处理,得到预测块;
在步骤S1320,根据当前待编码块和预测块计算残差数据,对残差块进行变换或跳过变换处理,以及进行量化处理得到量化系数块;
在步骤S1330,对量化系数块中的量化系数进行调整,以基于调整后的量化系数的统计结果隐含指示由参考块生成预测块的重构处理方式;
在步骤S1340,对当前待编码块与参考块之间的块矢量,以及量化系数调整后的量化系数块进行编码,得到编码后的码流。
需要说明的是,编码端的处理过程与解码端类似,比如对参考块所采取的重构处理方式等,不再赘述。
以下介绍本申请的装置实施例,可以用于执行本申请上述实施例中所述的方法。对于本申请装置实施例中未披露的细节,请参照本申请上述的方法实施例。
图14示出了根据本申请的一个实施例的视频解码装置的框图,该视频解码装置可以设置在具有计算处理功能的设备内,比如可以设置在终端设备或服务器内。
参照图14所示,根据本申请的一个实施例的视频解码装置1400,包括:解码单元1402、统计单元1404、第一处理单元1406和第二处理单元1408。
其中,解码单元1402配置为对采用帧内块复制模式的编码块进行解码处理,得到所述编码块对应的量化系数块和块矢量;统计单元1404配置为对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果;第一处理单元1406配置为根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式;第二处理单元1408配置为根据所述重构处理方式对所述块矢量指向的参考块进行处理,得到所述编码块对应的预测块。
在本申请的一些实施例中,基于前述方案,所述统计单元1404配置为:计算所述指定区域内的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果。
在本申请的一些实施例中,基于前述方案,所述统计单元1404配置为:将所述指定区域内的量化系数的数值进行线性映射,计算所述指定区域内的量化系数在线性映射之后的数值或绝对值之和,将得到的和值作为所述量化系数统计结果,其中,所述线性映射包括:
将所述指定区域内数值为奇数的量化系数的数值转换为第一数值,将数值为偶数的量化系数的数值转换为第二数值,其中,所述第一数值和所述第二数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的非零量化系数的数值转换为第三数值,将数值为零的量化系数的数值转换为第四数值,其中,所述第三数值和所述第四数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的量化系数的数值减少或增加第五数值;或
将所述指定区域内的量化系数的数值乘以或除以非零的第六数值;或
将所述指定区域内的量化系数的数值乘以或除以非零偶数。
在本申请的一些实施例中,基于前述方案,所述指定区域包括以下区域中的至少一个:
所述量化系数块中的全部区域;
所述量化系数块中指定的一个位置或多个位置;
所述量化系数块中指定的至少一行;
所述量化系数块中指定的至少一列;
所述量化系数块中指定的至少一行和指定的至少一列;
所述量化系数块中处于至少一条斜线上的位置;
所述量化系数块中的扫描区域系数编码SRCC区域;
所述SRCC区域中指定的一个位置或多个位置;
所述SRCC区域中指定的至少一行;
所述SRCC区域中指定的至少一列;
所述SRCC区域中指定的至少一行和指定的至少一列;
所述SRCC区域中处于至少一条斜线上的位置。
在本申请的一些实施例中,基于前述方案,所述SRCC区域中指定的一个位置或多个位置包括:按照扫描顺序的前N个位置或按照扫描顺序处于中间的N个位置,N为非0的自然数。
在本申请的一些实施例中,基于前述方案,所述第一处理单元1406配置为:若所述量化系数统计结果是奇数,则确定所述重构处理方式为第一处理方式;若所述量化系数统计结果是偶数,则确定所述重构处理方式为第二处理方式。
在本申请的一些实施例中,基于前述方案,所述第一处理单元1406配置为:计算所述量化系数统计结果针对设定值的余数;根据余数与重构处理方式之间的对应关系,选择与所述量化系数统计结果针对设定值的余数相对应的重构处理方式。
在本申请的一些实施例中,基于前述方案,所述余数与重构处理方式之间的对应关系是根据所述余数的取值,基于可选的重构处理方式进行预先设定的。
在本申请的一些实施例中,基于前述方案,所述视频解码装置1400还包括:第三处理单元,配置为在得到所述量化系数块之后,确定所述量化系数块中的量化系数是否全为0;若所述量化系数块中的量化系数不全为0,则由所述统计单元执行对所述量化系数块中指定区域内的量化系数进行统计的过程;若所述量化系数块中的量化系数全为0,则通过解码得到的显式索引确定所述重构处理方式。
在本申请的一些实施例中,基于前述方案,所述重构处理方式包括以下至少一种:是否是扩展的帧内块复制模式;扩展的帧内块复制模式中的水平翻转处理;扩展的帧内块复制模式中的竖直翻转处理。
在本申请的一些实施例中,基于前述方案,所述第一处理单元1406还配置为:根据以下方式中的至少一种确定对应的编码块是否需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式:视频图像帧序列对应的编码块的序列头中包含的索引标识的取值;视频图像帧对应的编码块的图像头中包含的索引标识的取值;编码块的尺寸大小。
图15示出了根据本申请的一个实施例的视频编码装置的框图,该视频编码装置可以设置在具有计算处理功能的设备内,比如可以设置在终端设备或服务器内。
参照图15所示,根据本申请的一个实施例的视频编码装置1500,包括:第四处理单元1502、第五处理单元1504、调整单元1506和编码单元1508。
其中,第四处理单元1502配置为对当前待编码块的参考块进行重构处理,得到预测块;第五处理单元1504根据所述当前待编码块和所述预测块计算残差数据,对所述残差块进行变换或跳过变换处理,以及进行量化处理得到量化系数块;调整单元1506配置为对所述量化系数块中的量化系数进行调整,以基于调整后的量化系数的统计结果隐含指示由所述参考块生成所述预测块的重构处理方式;编码单元1508配置为对所述当前待编码块与所述参考块之间的块矢量,以及量化系数调整后的量化系数块进行编码,得到编码后的码流。
图16示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
需要说明的是,图16示出的电子设备的计算机系统1600仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图16所示,计算机系统1600包括中央处理单元(Central Processing Unit,CPU)1601,其可以根据存储在只读存储器(Read-Only Memory,ROM)1602中的程序或者从存储部分1608加载到随机访问存储器(Random Access Memory,RAM)1603中的程序而执行各种适当的动作和处理,例如执行上述实施例中所述的方法。在RAM 1603中,还存储有系统操作所需的各种程序和数据。CPU 1601、ROM 1602以及RAM 1603通过总线1604彼此相连。输入/输出(Input/Output,I/O)接口1605也连接至总线1604。
以下部件连接至I/O接口1605:包括键盘、鼠标等的输入部分1606;包括诸如阴极射线管(Cathode Ray Tube,CRT)、液晶显示器(Liquid Crystal Display,LCD)等以及扬声器等的输出部分1607;包括硬盘等的存储部分1608;以及包括诸如LAN(Local AreaNetwork,局域网)卡、调制解调器等的网络接口卡的通信部分1609。通信部分1609经由诸如因特网的网络执行通信处理。驱动器1610也根据需要连接至I/O接口1605。可拆卸介质1611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器1610上,以便于从其上读出的计算机程序根据需要被安装入存储部分1608。
特别地,根据本申请的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本申请的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中,该计算机程序可以通过通信部分1609从网络上被下载和安装,和/或从可拆卸介质1611被安装。在该计算机程序被中央处理单元(CPU)1601执行时,执行本申请的系统中限定的各种功能。
需要说明的是,本申请实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现上述实施例中所述的方法。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本申请的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本申请实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本申请实施方式的方法。
本领域技术人员在考虑说明书及实践这里公开的实施方式后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
Claims (15)
1.一种视频解码方法,其特征在于,包括:
对采用帧内块复制模式的编码块进行解码处理,得到所述编码块对应的量化系数块和块矢量;
对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果;
根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式;
根据所述重构处理方式对所述块矢量指向的参考块进行处理,得到所述编码块对应的预测块。
2.根据权利要求1所述的视频解码方法,其特征在于,对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果,包括:
计算所述指定区域内的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为奇数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的数值之和,将得到的和值作为所述量化系数统计结果;或
计算所述指定区域内数值为偶数或非零偶数的量化系数的绝对值之和,将得到的和值作为所述量化系数统计结果。
3.根据权利要求1所述的视频解码方法,其特征在于,对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果,包括:
将所述指定区域内的量化系数的数值进行线性映射,计算所述指定区域内的量化系数在线性映射之后的数值或绝对值之和,将得到的和值作为所述量化系数统计结果,其中,所述线性映射包括:
将所述指定区域内数值为奇数的量化系数的数值转换为第一数值,将数值为偶数的量化系数的数值转换为第二数值,其中,所述第一数值和所述第二数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的非零量化系数的数值转换为第三数值,将数值为零的量化系数的数值转换为第四数值,其中,所述第三数值和所述第四数值中的一个为奇数,另一个为偶数;或
将所述指定区域内的量化系数的数值减少或增加第五数值;或
将所述指定区域内的量化系数的数值乘以或除以非零的第六数值;或
将所述指定区域内的量化系数的数值乘以或除以非零偶数。
4.根据权利要求1所述的视频解码方法,其特征在于,所述指定区域包括以下区域中的至少一个:
所述量化系数块中的全部区域;
所述量化系数块中指定的一个位置或多个位置;
所述量化系数块中指定的至少一行;
所述量化系数块中指定的至少一列;
所述量化系数块中指定的至少一行和指定的至少一列;
所述量化系数块中处于至少一条斜线上的位置;
所述量化系数块中的扫描区域系数编码SRCC区域;
所述SRCC区域中指定的一个位置或多个位置;
所述SRCC区域中指定的至少一行;
所述SRCC区域中指定的至少一列;
所述SRCC区域中指定的至少一行和指定的至少一列;
所述SRCC区域中处于至少一条斜线上的位置。
5.根据权利要求4所述的视频解码方法,其特征在于,所述SRCC区域中指定的一个位置或多个位置包括:按照扫描顺序的前N个位置或按照扫描顺序处于中间的N个位置,N为非0的自然数。
6.根据权利要求1所述的视频解码方法,其特征在于,根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式,包括:
若所述量化系数统计结果是奇数,则确定所述重构处理方式为第一处理方式;
若所述量化系数统计结果是偶数,则确定所述重构处理方式为第二处理方式。
7.根据权利要求1所述的视频解码方法,其特征在于,根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式,包括:
计算所述量化系数统计结果针对设定值的余数;
根据余数与重构处理方式之间的对应关系,选择与所述量化系数统计结果针对设定值的余数相对应的重构处理方式。
8.根据权利要求7所述的视频解码方法,其特征在于,所述余数与重构处理方式之间的对应关系是根据所述余数的取值,基于可选的重构处理方式进行预先设定的。
9.根据权利要求1所述的视频解码方法,其特征在于,所述视频解码方法还包括:
在得到所述量化系数块之后,确定所述量化系数块中的量化系数是否全为0;
若所述量化系数块中的量化系数不全为0,则执行对所述量化系数块中指定区域内的量化系数进行统计的过程;
若所述量化系数块中的量化系数全为0,则通过解码得到的显式索引确定所述重构处理方式。
10.根据权利要求1所述的视频解码方法,其特征在于,所述重构处理方式包括以下至少一种:
是否是扩展的帧内块复制模式;
扩展的帧内块复制模式中的水平翻转处理;
扩展的帧内块复制模式中的竖直翻转处理。
11.根据权利要求1至10中任一项所述的视频解码方法,其特征在于,所述视频解码方法还包括:根据以下方式中的至少一种确定对应的编码块是否需要根据量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式:
视频图像帧序列对应的编码块的序列头中包含的索引标识的取值;
视频图像帧对应的编码块的图像头中包含的索引标识的取值;
编码块的尺寸大小。
12.一种视频编码方法,其特征在于,包括:
对当前待编码块的参考块进行重构处理,得到预测块;
根据所述当前待编码块和所述预测块计算残差数据,对所述残差块进行变换或跳过变换处理,以及进行量化处理得到量化系数块;
对所述量化系数块中的量化系数进行调整,以基于调整后的量化系数的统计结果隐含指示由所述参考块生成所述预测块的重构处理方式;
对所述当前待编码块与所述参考块之间的块矢量,以及量化系数调整后的量化系数块进行编码,得到编码后的码流。
13.一种视频解码装置,其特征在于,包括:
解码单元,配置为对采用帧内块复制模式的编码块进行解码处理,得到所述编码块对应的量化系数块和块矢量;
统计单元,配置为对所述量化系数块中指定区域内的量化系数进行统计,得到量化系数统计结果;
第一处理单元,配置为根据所述量化系数统计结果,隐含导出由参考块生成预测块的重构处理方式;
第二处理单元,配置为根据所述重构处理方式对所述块矢量指向的参考块进行处理,得到所述编码块对应的预测块。
14.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至11中任一项所述的视频解码方法,或实现如权利要求12所述的视频编码方法。
15.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至11中任一项所述的视频解码方法,或实现如权利要求12所述的视频编码方法。
Publications (1)
| Publication Number | Publication Date |
|---|---|
| HK40076016A true HK40076016A (zh) | 2023-02-10 |
Family
ID=
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112533000B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN112543338B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN112565751B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN112543337B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN113207002B (zh) | 视频编解码方法、装置、计算机可读介质及电子设备 | |
| CN114079772B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN114979641B (zh) | 视频编解码方法、装置、计算机可读介质及电子设备 | |
| CN114513663B (zh) | 视频解码方法、装置及电子设备 | |
| CN114979642B (zh) | 视频编解码方法、装置、计算机可读介质及电子设备 | |
| HK40076016A (zh) | 视频编解码方法、装置、计算机可读介质及电子设备 | |
| CN114615497B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40064956A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40064588B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40064588A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40064956B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040679A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040651B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040651A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040661B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040661A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040658A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040658B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40040679B (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| CN114079773A (zh) | 视频解码方法、装置、计算机可读介质及电子设备 | |
| HK40071533A (zh) | 视频解码方法、装置及电子设备 |