CN109891892B 依赖于图像编译系统中的帧内预测的图像解码方法和装置 （Oppo广东移动通信有限公司）

2019.04.26PCT/KR2017/0094662017.08.30WO2018/070661KO2018.04.19SC29/WG11ANDITU-TSG.16,no.JVET-D0149.依赖于图像编译系统中的帧内预测的图像根据本发明的由解码装置执行的图像解码导出当前块的多行的上邻近样本以及多列的左参考样本和左参考样本中的至少一个来生成用2基于所述帧内预测模式、所述上参考样本和所述左参考样本生其中，在所述上参考样本中的被定位在第x列中的上参考样本基于在所述上邻近样本其中，被定位在所述第x列中的所述上参考样本基于所述权重和基于所述帧内预测模式、所述上参考样本和所述左参考样本生其中，在所述上参考样本中的被定位在第x列中的上参考样本基于在所述上邻近样本其中，被定位在所述第x列中的所述上参考样本基于所述权重和3.一种非暂时性计算机可读存储介质，其存储通过权利要求2的编码视频的方法生成获得用于所述视频的比特流，其中，所述比特流是基于确定当其中，在所述上参考样本中的被定位在第x列中的上参考样本基于在所述上邻近样本3其中，被定位在所述第x列中的所述上参考样本基于所述权重和4[0002]对于诸如HD(高清晰度)图像和UHD(超高清)图像的高分辨率、高质量图像的需求[0006]本发明还提供一种用于基于当前块的多个邻近样本生成参考样本并基于参考样考样本和左参考样本中的至少一个生成当前本和左参考样本中的至少一个生成当前块的模式使用上参考样本和左参考样本中的至少一个生成当前块的预测样本；以及熵编码单5[0021]图6图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样本[0023]图8图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样本[0025]图10图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样施例不旨在限制本发明。以下描述中使用的术语仅用于描述特定实施例，但不旨在限制本的存在或添加的可能性。6叉树(QTBT)结构从最大编译单元(LCU)递归地分离编译单元。例如，可以基于四叉树结构单元可以根据需要递归地分离成较低深度的编译单元并且具有最佳尺寸的编译单元可以可以根据四叉树结构将编译单元从最大编译单元(LCU)分离成更深深度的编译单元。在这者编译单元可以根据需要递归地分离成更深深度的编译单元并且具有最佳尺寸的编译单被称为编译块(CB)，预测单元可以被称为预测块(PB)，并且变换单元可以被称为变换块残差样本的阵列。7块的预测样本的预测块。在预测器110中执行的预测单元可以是编译块，或者可以是变换[0040]预测器110可以确定是将帧内预测应用于当前块还是将帧间预测应用于当前块。于当前块的邻近参考样本的平均值或内插来导出预测样本当前块的邻近参考样本中的预测样本的特定(预测)方向中存在的参考样本来导出预测样[0042]在帧间预测的情况下，预测器110可以基于由运动矢量在参考图片上指定的样本来导出当前块的预测样本。预测器110可以通过应用跳过模式、合并模式和运动矢量预测动信息可以包括运动矢量和参考图片索引。诸如预测模式信息和运动信息的信息可以被高图片可以用作参考图片。可以基于当前图片和对应的参考图片之间的图片顺序计数应变换块的大小和应用于与变换块在空间上重叠的编译块或预测块的预测模式来执行变将块形式的量化的变换系数重新排列成一维矢量。尽管重新排列器130被描述为单独的组[0049]熵编码器135可以对量化的变换系数执行熵编码。熵编码可以包括编码方法，例8如，指数哥伦布、上下文自适应可变长度编译(CAVLC)、上下文自适应二进制算术编译[0050]去量化器141对由量化器125量化的值(变换系数)进行去量化，并且逆变换器142对由去量化器141去量化的值进行逆变换以[0051]加法器150将残差样本添加到预测样本以重建图片。可以以块为单元将残差样本滤波和/或样本自适应偏移来校正恢复图片中的块边界处的伪像或量化中的失真。在去块器(ALF)应用于恢复图片。可以将ALF应用于已经应用去块滤波和/或样本自适应偏移的恢考图片集或参考图片列表来指定用于帧间预[0056]当输入包括视频信息的比特流时，视频解码设备200可以与在视频编码设备中处[0057]例如，视频解码设备200可以使用在视频编码设备中应用的处理单元来执行视频码器210可以基于诸如指数哥伦布编码、CAVLC、CABAC等的编译方法来解码比特流中的信[0060]更具体地，CABAC熵解码方法可以接收与比特流中的每个语法元素对应的二进制(bin)，使用解码目标语法元素信息和邻近和解码目标块的解码信息或者在先前步骤中解码的amabol/bin的信息来确定上下文模型，根据确定的上下文模型预测二进制生成概率，9以在确定上下文模型之后使用针对下一个符号/bin的上下文模型解码的符号/bin的信息可以将已经由熵解码器210执行熵解码的残差值，即，量化的变换系数输入到重新排列器以执行与由编码设备执行的系数扫描对应的重新排列。尽管重新排列器221被描述为单独[0063]去量化器222可以基于(去)量化参数对量化的变换系数进行去量化，以输出变换[0065]预测器230可以对当前块执行预测，并且可以生成包括当前块的预测样本的预测块。在预测器230中执行的预测的单元可以是编译块，或者可以是变换块或者可以是预测[0066]预测器230可以基于关于预测的信息确定是应用帧内预测还是应用帧间预测。在以PU为单元确定预测模式来以TU为单元[0067]在帧内预测的情况下，预测器230可以基于当前图片中的邻近参考样本导出当前块的预测样本。预测器230可以通过基于当前块的邻近参考样本应用定向模式或非定向模[0068]在帧间预测的情况下，预测器230可以基于根据运动矢量在参考图片中指定的样[0070]预测器230可以使用可用邻近块的运动信息来构造合并候选列表，并且使用合并[0072]在MVP模式的情况下，可以使用邻近块的运动矢量作为运动矢量预测器来导出当间邻近块的Col块对应的运动矢量来生成合并候选列表。从合并候选列表中选择的候选块[0074]当应用MVP(运动矢量预测)模式作为另一示例时，可以使用恢复的空间邻近块的运动矢量和/或与作为时间邻近块的Col块对应的运动矢量来生成运动矢量预测器候选列以从上述关于预测的信息获得或导出指示参考图片的参考图以在去块滤波之后以样本为单元应用样本自适应偏移。可以在去块滤波和/或应用样本自[0079]图3图示用于当前块的帧内预测的左邻近样本和上邻近样本。当在当前块中执行DC模式。剩余的第2至第34帧内预测模式是定向帧内预测模式，并且每个模式具有预测方前样本导出被定位在当前块的帧内预测模式的预测方向上的邻近样本的值作为当前样本于被定位在相应的预测方向的附近的整数样本单元的邻近样本的内插来导出相应预测方基于生成的参考样本执行帧内预测的方法以便于提高帧内预测的预测精度并提高编码效在上邻近样本中的特定列中的四个上邻近样本生成被定位在特定列中的一个上参考样本，并且可以基于被定位在左邻近样本中的特定行中的四个左侧邻近样本生成被定位在特定定位在第y列中的四个左邻近样本的样本值的平均值作为第y行的左参考样本可以被分配为1/4，并且第三行上邻近样本和第四行上邻近样本的权重可以被分配为1/8。第三列左邻近样本和第四列左邻近样本的权重[0085]此外，向每个邻近样本分配权重的方法可以包括除了上述示例之外的各种方[0088]其中D'可以表示上参考样本(或左参考样本)，w1可以表示第一行上邻近样本(或可以根据当前块的预测方向基于超过多行或者多列的2N个邻近样本的邻近样本来导出参定位在包括附加区域510的邻近样本中的当前块的预测方向上的邻近样本来生成当前块的近样本的附加区域中的样本的示例，但是类似于生成被定位在附加区域510中的样本的示左邻近样本中的最最低左邻近样本的样本值来生成被定位在左邻近样本的附加区域中的[0091]当导出包括附加区域510的上邻近样本的上邻近样本时，可以基于上邻近样本生[0092]图6图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样本处，在与当前块的预测方向对应的位置处的上邻近样本可以用于生成上参考样本610。例性内插与邻近样本的左边和右边相邻的整数样本D1和D2的样本值来生成作为分数样本的则来分配每个上参考样本的权重，并且可以基于每个上参考样本和权重来生成上参考样[0101]图8图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样本以从右上侧指向左下侧，并且被定位在如图8(a)中所示的附加区域810中的上邻近样本可于当前块的帧内预测模式来导出当前块的参[0106]图10图示基于包括另外生成的上邻近样本的上邻近样本生成当前块的上参考样H'。[0107]当包括在区域B中的帧内预测模式被应用于当前块并且当包括在区域C中的帧内域D中的帧内预测模式被应用于当前块时，可以通过与导出当前块的参考样本的方法相同[0109]编码设备确定当前块的帧内预测模式(S1100)。编码设备可以执行各种帧内预测[0110]编码设备导出当前块的多行上邻近样本和多列左邻近样本(S1110)。编码设备可[0111]可以基于基于上参考样本的位置和当前块的帧内预测模式的预测方向导出的特本的数量可以大于2N，并且在第(n+1)行的上邻近样本中的第2N个上邻近样本之后的上邻在生成当前块的预测样本之前，当生成与第(n+1)行的上邻近样本中的第2N个上邻近样本被定位在每行的第一上邻近样本中的最右侧处的第二上邻近样本来导出每行的第二上邻样本中的被定位在最右侧处的第二上邻近样[0115]左参考样本可以基于基于左参考样本的位置和当前块的帧内预测模式的预测方左邻近样本可以被用于根据当前块的预测方向来导出于2N，并且在第(n+1)列左邻近样本中的第2N个左邻近样本之后的左邻近样本可以通过填样本之前，当生成对应于第(n+1)列左邻近样本中的第2N左邻近样本之后的左邻近样本的被定位在每列的第一左邻近样本中的最下侧处的第二左邻近样本来导出每列的第二左邻[0118]编码设备基于上邻近样本导出一行上参考样本(S1120)。编码设备可以基于多个[0119]例如，可以基于被定位在上邻近样本中的第x列中的上邻近样本来导出被定位在本来导出被定位在第x列中的上参考样本。当导出被定位在第x列中的上邻近样本的权重[0120]例如，可以基于上邻近样本和被定位在第x列中的上参考样本之间的距离来导出[0125]当基于当前块的预测方向导出的特定上邻近样本包括作为分数样本的上邻近样[0127]编码设备基于左邻近样本导出一行左参考样本(S1130)。编码设备可以基于多列[0128]例如，可以基于被定位在左邻近样本中的第y行中的左邻近样本来导出被定位在[0129]例如，可以基于被定位在第y行中的左邻近样本和左参考样本之间的距离来导出应的特定左邻近样本和第一左参考样本之间的距[0134]当基于当前块的预测方向导出的特定左邻近样本包括作为分数样本的左邻近样[0136]编码设备根据帧内预测模式使用上参考样本和左参考样本中的至少一个来生成当前块的预测样本(S1140)。编码设备可以基于预测样本的位置基于被定位在帧内预测模可以包括指示基于当前块的左块或者上块的帧内预测模式导出的帧内预测模式候选列表[0139]解码设备导出当前块的帧内预测模式(S1200)。解码设备可以通过比特流获得关于当前块的左块或者上块的帧内预测模式导出的帧内预测模式候选列表中的任何一个候[0140]解码设备导出当前块的多行上邻近样本和多列左邻近样本(S1210)。解码设备可[0141]上参考样本可以基于基于当前块的上参考样本的位置和当前块的帧内预测模式本之外的上邻近样本可以被用于根据当前块的预测方向导出本的数量可以大于2N，并且第(n+1)行的上邻近样本中的第2N个上邻近样本之后的上邻近当前块的预测样本之前，当生成与第(n+1)行的上邻近样本中的第2N个上邻近样本之后的近样本可以通过填充被定位在每行的第一上邻近样本中的最右侧处的第一上邻近样本来在多个列的每列中导出2N个左邻近样本。每列的2N个左邻近样本可以称为第一左邻近样[0145]左参考样本可以基于基于当前块的左参考样本的位置和当前块的帧内预测模式本之外的左邻近样本可以被用于根据当前块的预测方向来导出本的数量可以大于2N，并且在第(n+1)列的左邻近样本中的第2N个左邻近样本之后的左邻成当前块的预测样本之前，当生成与第(n+1)列的左邻近样本中的第2N个左邻近样本之后第二左邻近样本可以通过填充在每列的第一左邻近样本中的被定位在最下侧处的第一左左邻近样本中的被定位在最下侧处的第一左邻近样[0148]解码设备基于上邻近样本导出一行上参考样本(S1220)。解码设备可以基于多行[0149]例如，可以基于在上邻近样本中的被定位在第x列的上邻近样本来导出上参考样来导出被定位在第x列中的上参考样本。当导出被定位在第x列中的上邻近样本的权重时，[0150]例如，可以基于被定位在第x列中的上邻近样本和上参考样本之间的距离来导出[0155]当基于当前块的预测方向导出的特定上邻近样本包括作为分数样本的上邻近样[0157]解码设备基于左邻近样本导出一行左参考样本(S1230)。解码设备可以基于多列[0158]例如，可以基于左邻近样本中的被定位在第y行中的左邻近样本来导出左参考样[0159]例如，可以基于被定位在