CN119452659A 暗示子块变换编译码的方法和装置 （联发科技股份有限公司）

2024.12.20PCT/CN2023/1018422023.06.21WO2023/246901EN2023.12.28示推导出的候选子部分块的部分集中选择SBT位2在解码器端接收待解码当前块相关的编码数据，其中，使用子块变换(Subblock比特流中解析该SBT位置；或者从由该候选子部分块集暗示推导出的候选子部分块的部分一个或复数个相应边界样本推导出的该候选子部分块集的边界匹配成本数个相邻样本的重建样本推导出的差为每个候选子部分块决4.如权利要求3所述之方法，其中，该SBT位置是依据该的重建的残差样本加到该每个候选子部分块的预测样本8.如权利要求1所述之方法，其中，该候选子部分块集包括使用具有二叉树(binarytree,BT)分裂的垂直SBT(SBT_ve块的内容所产生的假设位置相关的边界匹配成本暗示决定该SB3在编码器端接收与待编码当前块相关的像素数据，其中，使用子块变换(Subblock在比特流中发出该SBT位置讯号；或者从由该候选子部分块集暗示推导出的候选子部分块4[0002]本发明是申请号为63/354,376，于2022[0003]本发明涉及视频编解码系统中用于画面间预测编解碼块的子块变换(Subblock[0004]多功能视频编解码(VersatileVideoCoding,VVC)是由ITU_T视频编解碼专家组(VideoCodingExpertsGroup,VCEG)和ISO/IEC移动图片专家组(MovingPictureExpertsGroup,MPEG)的联合视频专家团队(JointVideoExpertsTeam,JVET)制定的最提高编解碼效率和处理包括三维(3_dimensional,3D)视频信号的各种类型的[0005]图1A描述了一种示例性结合环路处理的自我调整画面间(inter)/画面内(intra)视频数据被存储到参考图片缓存器134之前，重建的视频数据通常会应用环内滤波器130。例如，可以使用去块滤波器(deblockingfilter,DF)、采样自我调整偏移(Sample5图片缓存器134之前应用于重建的视频。图1A中的系统旨在描述典型视频编码器的示例性用熵解码器140将视频比特流解码为量化变换系数和所需编解码信息(如环内滤波器(in_块相关的编码数据，其中使用子块变换(Sub流中解析该SBT位置；或者从该候选子部分块集暗示推导出的候选子部分块的部分集选择本的预测样本和该当前块的该一个或复数个相邻样本的重建样本推导出的差为每个候选界匹配成本中边界匹配成本最大的目标候选子部块集的该边界匹配成本中边界匹配成本最小的目标候选子部分块决定6切/粘贴该当前块的残差块的内容所产生的假设位置相关的边界匹配成本暗示决定该SBT[0016]在一个实施例中，该候选子部分块部分集对应该候选子部分块集的N个假设位置从该候选子部分块集暗示推导出的候选子部分块的部分集中选择该SBT位置。透过使用包[0018]图1A是描述示例性结合环路处理的自我调整画面间/画面内视频编解码系统的示平二元分裂(verticalbinarysplitting,SPLIT_BT_HOR)，垂直三元分裂(verticalternarysplitting,SPLIT_TT_VER)和水平三元分裂(horizontalternarysplitting,SPLIT_TT_HOR)的多类型树结[0021]图3是描述分区分裂信息在具有嵌套的多类型树的四叉树编解码树结构内的讯号[0022]图4显示利用四叉树和嵌套的多类型树编解码块结构将编解码树单元(Coding[0023]图5显示当亮度(luma)编解碼块的宽度或高度大于64时三叉树(ternarytree,[0024]图6A_D是描述依据本发明的一实施例的用于不同SBT的边界匹配计算的区域的示[0025]图7是描述依据本发明一实施例的边界匹配成本计算中涉及的样本的示例的示意[0026]图8是描述分裂包括具有TT分裂的SBT_V的1:2:1，3:4:1和1:4:3和具有TT分裂的7[0029]图11A_D是描述依据本发明的一实施例的用于不同SBT的边界匹配计算的区域的[0030]图12是描述依据本发明另一实施例的边界匹配成本计算中涉及的样本的示例的[0031]图13是描述依据本发明的一实施例的示例性视频解码系统暗示推导SBT位置的流[0032]图14是描述依据本发明的一实施例的示例性视频编解码系统暗示推导SBT位置的所要求的发明一致的装置和方法的某些选定实单元，CodingTreeUnits)。每个CTU可以被分割为一个或复数个更小尺寸的编解码单元8[0039]在VVC中，具有嵌套的多类型树的四叉树用二元和三元分裂分割结构取代了复数[0040]图3是描述分区分裂信息在具有嵌套的多类型树的四叉树编解码树结构内的讯号发出第二标志(mtt_split_cu_vertical_flag)讯号以指示分裂方向，然后发出第三标志(mtt_split_cu_binary_flag)讯号以指示该分裂是二元分裂还是三元分裂。依据mtt_split_cu_vertical_flag和mtt_split_cu_binary_flag的值，可以推导出CU的多类型树mtt_split_cu_vertica00011011[0043]图4显示利用四叉树和嵌套的多类型树编解码块结构将CTU划分为复数个CU，其[0044]在VVC中，支持的最大亮度变换尺寸是64×64，支持的最大色度变换尺寸是32×[0045]SPS(SequenceParameterSet，序列参数集)语法元素为具有嵌套的多类型树的9×128亮度样本以及两个对应的64×64块的4:2:0色度样本。MinQTSize设置为16×16，型树深度达到MaxMttDepth(即4)时，不再考虑进一步分裂。当多类型树节点的宽度等于面间MTS(MultiTransformSelection,多重变换选择)信息被进一步解析以决定CU的变SBT类型信息指示TU分裂类型(如，类似二叉树分裂或不对称二叉树分裂的分裂)和分裂方向(如水平分裂或垂直分裂)，相应的语义名称是VVC中的cu_sbt_quad_flag和cu_sbt_horizontal_flag。SBT位置信息指示哪个TU有非零残差，相应的语义名称是VVC中的cu_3:1分裂。2:2分裂就像二叉树(binarytree,BT)分裂，而1:3/3:1分裂类[0062]位置依赖的变换核心选择(position_dependenttransformcoreselection)应[0063]为了减少编码器运行时间，已经在SBT的RDO(Rate_DistortionOpt分的平方差之和(SumofSquaredDifferences,SSD)来估计。如果SBT模式的估计的RD成[0065]算法2：应用变换模式保存和加载(在JVET_K0358中提出的模式基础上进行了改[0068]下面公开几种节省SBT的信令开销(signallingoverhead)或提高编解碼效率的[0069]依据本发明的实施例，SBT中残差块的子部分(sub_part)的最终位置(例如VVC中cokmklr前块710的当前预测(即当前块内的预测样本)与相邻重建(即一个或复数个相邻块内的重部边界的N条线和/或当前块内左边界的M条线。此外，M和N可以进一步依靠当前块尺寸决[0078]–a＝2,b＝1,c＝1,d＝2,e＝1,f＝1,g＝2,h＝1,i＝1,j＝2,k＝1,l＝1.[0079]–a＝2,b＝1,c＝1,d＝0,e＝0,f＝0,g＝2,h＝1,i＝1,j＝0,k＝0,l＝0.[0080]–a＝0,b＝0,c＝0,d＝2,e＝1,f＝1,g＝0,h＝0,i＝0,j＝2,k＝1,l＝1.[0081]–a＝1,b＝0,c＝1,d＝0,e＝0,f＝0,g＝1,h＝0,i＝1,j＝0,k＝0,l＝0.[0082]–a＝2,b＝1,c＝1,d＝2,e＝1,f＝1,g＝1,h＝0,i＝1,j＝0,k＝0,l＝0.[0083]–a＝1,b＝0,c＝1,d＝0,e＝0,f＝0,g＝2,h＝1,i＝1,j＝2,k＝1,l＝1.和相邻重建样本之间的边界匹配差，还检查沿当前块的画面间TU边界的当前预测样本差cde切/粘贴残差块和检查每个候选SBT编解码模式的当前预测样本与相邻重建样本之间的边转残差块(1010和1020)决定。在图10B中，暗示分区方向透过翻转残差块(1030和1040)决ghk和[0090]例如，如果当前SBT类型为具有ABT分裂的SBT_H(如，图11B中的分裂1120和分裂ncf和e[0092]例如，如果当前SBT类型为具有ABT分裂的SBT_V(如，图11D中的分裂1140和分裂aacc和resiff分可以利用前面提到的示例值。置的边界匹配成本。如果一个假设位置比其他假设差值)，则该假设位置的非零残差子部分块位置被暗示推断为当前块内非零残差子部分块cdea为了暗示推导具有残差的子部分TU的最终位置，依重建的残差加到相应的预测样本中，并检查具有相邻L形重建样本的每个假设位置的边界个假设位置。然后，透过比特流中的讯号索引，从这i个假设位置(例如，i可以是2、3、[0104]图13是描述依据本发明的一实施例的示例性视频解码系统暗示推导SBT位置的流程图。流程图中所示的步骤可实施为在编码器[0105]图14是描述依据本发明的一实施例的示例性视频编解码系统暗示推导SBT位置的位置讯号；或者从由该候选子部分块集暗示推导出的候选子部分块的部分集中选择该SBT[0107]上述描述旨在使本领域普通通常知识者能够依据特定应用及其要求实践本发的特定方法的机器可读软件代码或固件代码，这些处理器可用于执行本发明的特定任务。执行依据本发明的任务的其他方式将不会脱离本发明的精神和