CN113906752B 视频数据处理方法和装置 （寰发股份有限公司）

2022.01.072021.11.15PCT/CN2020/092978202WO2020/239038EN2020.12.03用于对当前块和相邻块进行编码的视频处邻块的输入数据，确定当前块和相邻块均以颜色分量的去块滤波并激活针对第二颜色分量相邻块进行编码或解码。BDPCM编码块中的每个当前像素由当前像素的一个或多个相邻像素预2接收与当前图片中的当前块和相邻块相关的输入数据，其中，确定该当前块和该相邻块是否均以块差分脉冲编码调制模式编中每个块差分脉冲编码调制编码块中的每个当前像素由该当前图片中的该当前像素的一邻块之间的边缘上的第一颜色分量停用去块滤波并为该当前块和该相邻块之间的该边缘上的第二颜色分量激活去块滤波来对该当前块和该相邻块之间的该边缘执行去块滤波操对该当前图片中的该当前块和该相邻块进行编该边缘上的该第二颜色分量的去块滤波的边界强块相关联的输入数据，确定该第二相邻块以不同于该块差分脉冲编码调制模式的模式编接收与当前图片中的当前块和相邻块相关的输入数据，其中，确定该当前块和该相邻块是否均以残差差分脉冲编码调制模式的预测方向将残差差分脉冲编码调制应用于该相相邻块之间的边缘上的第一颜色分量停用去块滤波并为该当前块和该相邻块之间的该边缘上的第二颜色分量激活去块滤波来对该当前块和该相邻块之间的该边缘执行去块滤波对该当前图片中的该当前块和该相邻块进行编3该当前块和该相邻块之间的该边缘上的该第一颜色分量和该第二颜色分量的去块滤波来接收与当前图片中的当前块和相邻块相关的输入数据，其中，确定该当前块和该相邻块都以块差分脉冲编码调制模式编码，脉冲编码调制编码块的预测方向将残差差分脉冲编码调制应用于该残差差分脉冲编码调通过为该当前块和该相邻块之间的边缘上的第一颜色分量停用去块滤波并为该当前块和该相邻块之间的该边缘上的第二颜色分量激活去块滤波来对该当前块和该相邻块之对该当前图片中的该当前块和该相邻块进行编4DecisionsforBlockDPCMandQuantizedResidualBDPCM”的美国临时专利申请以及2019.10.15提交的申请号为62/915,053，名称为“DeblockingFilterDecisionsfor对两个块差分脉冲编码调制(BlockDifferentialPulseCodeModulation，简写为BDPCM)编码块之间或两个残差差分脉冲编码调制(ResidualDifferentialPulseCodeModulation，简写为RDPCM)编码块之间的边缘的去块滤波判决(deblockingfilter[0004]高效视频编码(HEVC)标准是由ITU-T研究组的视频编码联合协作团队(JCT-VC)的视频编码专家组开发的最新视频编码标准。HEVC标准改进了进行中的标准H.264/AVC的视基于块的编码结构，该结构将每个视频切片分为多个方形编码树单元(CTU)，其中CTU是可为一幅或两幅参考图片中使用图像间预测编码的CU识别一个(单预测)或两个(双向预测)最佳参考块，而图像间预测中的运动补偿可根据一个或两个运动矢量(MV)来定位该一[0005]块差分脉冲编码调制(BDPCM)在即将出现的新兴视频编码标准中，已经开发了块差分脉冲编码调制(Block-DPCM或BDPCM)来预测具有每个尺寸小于或等于32个样本的帧内帧内编码或Block-DPCM应用于帧内CU，并且使用单个CABAC上下文对BDPCM标志进行编码。当选择BDPCM编码或解码当前块时，使用LOCO-1的中值边缘检测器从垂直和水平方向上的5序分别编码当前块的所有幅度。为了保持BDPCM的低复杂度，幅度值限制为最大31(包含[0011]在两个BDPCM块之间的边界上，用于亮度(luma)和色度(chroma)分量的去块滤波均被停用，因为两个BDPCM块都不由变换阶段处理，其中变换阶段通常负责块伪像[0012]残差差分脉冲编码调制(RDPCM)BDPCM的另一种方案是量化残差域的BDPCM(RDPCM6[0015]对于水平预测，适用类似的规则，并且残差量化样本(residualquantized[0022]RDPCM方案的主要优点在于，可以通过简单地将预测子与所解析的系数相加来在以避免将4xN和Nx4块拆分为2个并行处理的块(p[0023]去块滤波(DeblockingFilter)开发了去块滤波工具以减轻基于块的视频编码系和色度分量之间是独立的，因此可以独立处理所有三个分量。去块滤波决策包括开/关决码条件更有可能产生明显的块伪像(strongblockartifact)，因此根据诸如预测模式和运动矢量之类的比特流信息来做出去块滤波决策。根据去块滤波决策来定义边界强度个条件都为真时，将由双线性滤波器(bilinearfilter)实现的强去块滤波应用于亮度边下公式确定，其中#是取决于量化参数(QuantizationParameter)且具有分段线性相关的[0026]在针对块边界选择强去块滤波的情况下，对于i＝0至Sp-1的p侧pi的块边界样本和对于j＝0至Sq-1的q侧qj的块边界样本通过7[0029]其中tcPDi和tcPDj是与位置相关的限幅变量(clippingvariable)，强去块89[0038]将色度去块滤波应用到4x4色度样本网格上，并且当色度边缘的两侧都大于或等作应用于与8x8网格对准的CU边界以及子块边界。子块边界包括通过空间时空运动矢量预将去块滤波应用于8x8网格上的TU边界。对于子块时间运动矢量预测(SubblockTemporal前块和相邻块相关联的输入视频数据，确定当前块和相邻块是否都被编码为BDPCM模式或去块滤波操作。当前图片中的BDPCM编码块中的每个当前像素由当前图片中当前像素的一前像素的相邻像素是未滤波的参考像素，或者当相邻像素在BDPCM编码块内时，用于预测[0046]视频编码系统的一些实施例从当前像素的一个或多个相邻像素中确定以BDPCM模系统的一些实施例从当前像素的一个或多个相邻像素确定以BDPCM模式编码的当前块中的[0047]视频编码系统的一些实施例确定以RDPCM模式编码的当前块中的每个当前像素的一些实施例还确定以RDPCM模式编码的当前块中每个当前像素的预测子，解码当前块的量[0048]在应用RDPCM的一些实施例中，视频编码或解码系统确定当前块的预测方向和相[0049]视频编码系统的实施例显式地发信当前块和相邻块的BDPCM预测模式标志，并且第二相邻块是以除BDPCM模式之外的模式编码的，则激活针对第一和第二颜色分量的去块模式编码时，通过停用用于第一颜色分量的去块滤波并激活用于第二颜色分量的去块滤[0052]图1示出了根据本发明的实施例的确定针对在p侧和q侧之间的边缘上的亮度分量[0053]图2示出了根据本发明实施例的确定针对在p侧和q侧之间的边缘上的色度分量Cb[0055]图4示出了根据本发明实施例的，结合了视频处理方法的视频编码系统的示例性[0056]图5示出了根据本发明实施例的，结合了视频处理方法的视频解码系统的示例性[0058]用于两个BDPCM或RDPCM块之间的边缘的去块滤波决策在本发明的一些示例性实施例中，BDPCM或RDPCM模式仅应用于视频数据的亮度分量。对于以BDPCM模式编码的当前至少一个颜色分量是由BDPCM或RDPCM模式处理的。BDPCM编码块中的每个当前像素由当前素的相邻像素是未滤波的参考像素，而若相邻像素位于BDPCM编码块之内，则用于预测BDPCM编码块中的当前像素的相邻像素是重构像素。根据预测方向将RDPCM应用于RDPCM编活针对当前块与另一BDPCM/RDPCM编码块之间的边缘上的第二颜色分量的去块滤波。当第时，用于两个BDPCM/RDPCM块之间的边缘上的第一颜色分量的去块滤波的边界强度值被设置为零，而将用于两个BDPCM/RDPCM块之间的边缘上的第二颜色分量的去块滤波的边界强在两个BDPCM编码块或两个RDPCM编码块之间的边缘上激活。在仅将BDPCM模式应用于色度另一个BDPCM编码的块之间的边缘上停用对色度分量的去块滤波，并且在当前块和另一个针对亮度和色度分量的去块滤波的边界强度值设[0061]在本发明的一些实施例中，视频编码系统明确地发信当前块的BDPCM预测模式标[0062]在图1和图2中示出了为实现本发明的实施例而导出用于标记边缘(markededge)如果当前边缘的p侧和q侧均在亮度BDPCM模式下编码，针对亮度分量的去块滤波的边界强码系统检查当前边缘的p侧或q侧中的任何一个是否以帧内模式或帧间和帧内联合预测边缘，并且对于每个颜色分量，在p侧或q侧的块(TB)编码块标记(CBF)不为零。如果步骤差小于或等于8，其中mvx代表运动向量的水平尺寸(horizontaldimension)和mvy表示运[0063]图2示出了根据本发明实施例的针对色度分量Cb和Cr推导去块滤波的边界强度值骤S202的检查结果为真，则针对色度分量的去块滤波的边界强度值设置为零(bS_Cb＝0，bS_Cr＝0)，否则视频编码或解码系统检查当前边缘的p侧或p侧之任一是否以帧内模式或侧或q侧的CBF是否不为零，或者p侧或q侧是否为联合色度残差模式(jointchroma个BDPCM或RDPCM块之间的边缘上激活亮度和色度分量的去块滤波，并且如果这两个BDPCM[0066]对具有用BDPCM或RDPCM编码的一侧的边缘的去块滤波决策当在对具有用BDPCM或RDPCM模式编码的一侧的边缘做出去块滤波决策时，本发明的一些实施例将每个BDPCM或色度分量的去块滤波的边界强度(bS)值都设置为2，因此可以使用去块滤波对亮度和色度RDPCM模式应用于亮度分量时，在当前边缘上停用用于亮度分量的去块滤波，其中，利用BDPCM或RDPCM模式对当前边缘的任一侧进行编码。例如，如果边缘的任何一侧用BDPCM或RDPCM模式编码的侧的色度去块滤波的bS值被设置为零，而用于滤波边缘的另一侧的色度去块滤波的bS值被设置为2。在又一个实施例中，用于色度分量的去块滤波在边缘上被停[0070]用于以变换跳过模式编码的块的去块滤波决策根据在变换跳过模式(transformSkipmode，简写为TSM)中编码边缘的一侧还是两侧的块来进行去块滤波决策的一些实施离散余弦变换(DCT)的变换操作应用于像素域中的残差数据来变换残差数据，并在频域中[0073]考虑针对以变换跳过模式编码的块的运动信息的去块滤波决策在一些其他实施(transform-skipped)块具有相同或相似的运动矢量和相同的参考图片，则在两个变换跳如果至少一个亮度块用TSM中编码并且两个亮度块具有相同或相似的运动矢量和相同的参用TSM编码并且当前边缘的两侧具有相同或相似的运动矢量和相同的参考图片，则将当前[0074]编码或解码过程的示例性流程图图3示出了根据本发明实施例的将在视频编码或频编码或解码系统还在步骤S310中检查当前块和相邻块之一是否以BDPCM模式被编码。如果在BDPCM模式下对当前块和相邻块之一进行编码，则在步骤S312中通过对第一和第二颜码或解码系统在步骤S308中对当前图片中的当前块和相邻块进行编码[0075]视频编码器和解码器的实现可以在视频编码器或解码器中实现前述的视频处理替代地，任何所提出的方法都被实现为耦合到编码器的去块滤波和/或解码器的去块滤波测子。帧间预测模组412基于来自其他图片的视频数据执行运动估计(ME)和运动补偿(MC)块由BDPCM模式编码，并且当前块中的每个当前像素由当前图片中当前像素的一个或多个相邻像素预测。从当前像素的相邻像素确定以BDPCM模式编码的当前块中的每个当前像素视频数据可以被存储在参考图片缓冲器(ReferencePictureBuffer)432中，并且被用于块和同样以BDPCM模式编码的相邻块之间的边缘上执行去块滤波操作时，DF428的实施例停用用于第一颜色分量的去块滤波并激活用于第二颜色分量的去块滤波。例如，当仅将预测模组410中通过帧间或帧内预测来预测当前块中的每个当前像素，以生成每个当前像素的预测子。通过加法器416根据每个当前像素的预测子来确定当前块中的每个当前像素每个当前像素在重构模组426中通过添加相应的去量化残差和当前像素的预测子而被重停用用于第一颜色分量的去块滤波以及激活第二颜色分量的去块滤波，来对两个RDPCM块[0077]在图5中示出了用于解码从图4的视频编码器400生成的视频比特流的对应的视频器500仅需要帧间预测模组514中的运动补偿预测。每个块都由帧内预测模组512或帧间预组516根据解码的模式信息从帧内预测模组512选择帧内预测子或从帧间预测模组514选择帧间预测子。与以BDPCM模式编码的当前块的每个当前像素相关联的量化残差由逆量化模本发明的一些实施例，在两个BDPCM块之间的边缘上执行的去块滤波操作停用针对第一颜图片是参考图片，则当前解码的图片的重构视频也存储在参考图片缓冲器528中以用于解每个当前像素。DF524在当前块和相邻块之间的边缘