CN120302048A 图像解码方法、图像编码方法和比特流发送方法 （Lg电子株式会社）

202080068734.72020.08.20测的第一标志以及对当前块的具有CU级别权重的双预测BCW的权重索引BcwIdx；基于第一标志和BcwIdx确定对当前块执行默认加权预测还是2基于所接收的比特流来推导针对关于画面的当前块的双向光流BDOF基于所述第一标志指定不对所述当前块应用用于对所述当前块执行具有CU级别权重的双并且基于所述第二标志和所述权重索引BcwIdx，确定对所述当其中，基于所述第二标志等于0或所述权重索引BcwIdx不等于其中，基于所述第二标志等于1并且所述权重索引BcwIdx等于其中，基于所述权重索引BcwIdx不等于0，所述默认加权预测对所述当前块执行所述其中，基于针对所述当前块的参考画面的加权参数来执行所其中，基于所述当前切片的所述切片类型是B切片，所述第二标志其中，基于通过所述比特流用信号通知的语法元素bcw_idx来推导所述权重索引标志从所述比特流解析所述语法元素bcw_推导针对关于画面的当前块的双向光流BDOF3基于所述第一标志指定不对所述当前块应用基于所述第二标志和所述权重索引BcwIdx，确定对所述当前块执行默其中，基于所述第二标志等于0或所述权重索引BcwIdx不等于其中，基于所述第二标志等于1并且所述权重索引BcwIdx等于其中，基于所述权重索引BcwIdx不等于0，所述默认加权预测对所述当前块执行所述其中，基于针对所述当前块的参考画面的加权参数来执行所推导针对关于画面的当前块的双向光流BDOF基于所述第一标志指定不对所述当前块应用基于所述第二标志和所述权重索引BcwIdx，确定对所述当前块执行默其中，基于所述第二标志等于0或所述权重索引BcwIdx不等于其中，基于所述第二标志等于1并且所述权重索引BcwIdx等于其中，基于所述权重索引BcwIdx不等于0，所述默认加权预测对所述当前块执行所述其中，基于针对所述当前块的参考画面的加权参数来执行所4[0001]本申请是原案申请号为202080068734.7的发明专利申请(国际申请号：PCT/种用于考虑光流预测细化(PROF)来执行加权预测的图像编码/解码方法和设备以及发送通[0006]本公开的目的是提供一种具有改进的编码/解码效率的图像编码/解码方法和设[0007]本公开的另一个目的是提供一种用于执行加权预测的图像编码/解码方法和设[0008]本公开的另一个目的是提供一种用于考虑PROF执行加权预测或具有CU级别权重[0009]本公开的另一个目的是提供一种发送由根据本公开的图像编码方法或设备生成[0010]本公开的另一个目的是提供一种存储由根据本公开的图像编码方法或设备生成预测的第一标志以及对当前块的具有CU级别权重的双预测(BCW)的权重索引BcwIdx；基于5以被推导为在画面参数集(PPS)用信号通知的pps_weig前切片的切片类型是B切片，第一标志可以被推导为在PPS用信号通知的pps_weighted_[0017]在根据本公开的图像解码方法中，可以基于通过比特流用信号通知的语法元素[0022]在根据本公开的图像解码方法中，默认加权预测可以基于BcwIdx执行BCW或平均至少一个处理器可以推导指定是否对当前块执行加权预测的第一标志以及对当前块的具有CU级别权重的双预测(BCW)的权重索引BcwIdx；基于第一标志和BcwIdx来确定对当前块执行默认加权预测还是明确加权预测；并且通过执行所确定的方法来生成当前块的预测权预测的第一标志以及对当前块的具有CU级别权重的双预测(BCW)的权重索引BcwIdx；基[0029]以上关于本公开的简要概述的特征仅仅是本公开的以下6[0032]此外，根据本公开，能够提供一种用于执行加权预测的图像编码/解码方法和设[0050]图13是示意性地例示根据本公开的示例的运动向量预测子候选列表配置方法的7 的第一组件在另一个实施方式中可以被称为第二组件，类似地，一个实施方式中的第二组件在另一个实施方式中可以被称为第一组件。术语可以具有本公开所属技术领域中常用的[0075]在本公开中，“画面”一般是指表示特定时间段内的一个图像的单元，而切片(slice)/拼块(tile)是构成画面的一部分的编码单元，一个画面可以由一个或更多个切仅表示亮度分量的像素/像素值或仅表示色度分量的像素/8选地”。以将编码的视频和/或图像信息或数据以文件或流的形式经由数字存储介质或网络递送到[0084]根据实施方式的编码设备10可以包括视频源生成器11、编码单元12和发送器1[0085]视频源生成器11可以通过捕获、合成或生成视频/图像的过程来获取视频/图[0087]发送器13可以通过数字存储介质或网络以文件或流的形式将以比特流的形式输出的编码视频/图像信息或数据传输到解码设备20的接收器21。数字存储介质可以包括各格式生成媒体文件的元件并且可以包括用于通过广播/通信网络传输的元件。接收器21可以从存储介质或网络中提取/接收比特流并将比特流传输到解码[0088]解码单元22可以通过执行与编码单元12的操作相对应的一系列过程，例如解量9180、帧内预测单元185和熵编码器190。帧间预测单元180和帧内预测单元185可以统称为[0093]在一些实施方式中，配置图像编码设备100的多个组件中的全部或至少一些可以[0094]图像分割器110可将输入到图像编码设备100的输入图像(或画面或帧)分割成一三叉树(QT/BT/TT)结构递归地分割编码树单元(CTU)或最大编码单元(LCU)来获取编码单树结构和/或三叉树结构。可以基于不再分割的最终编码单元来执行根据本公开的编码过单元可以是用于推导变换系数的单元和/或用于从变换系数推导残差[0095]预测单元(帧间预测单元180或帧内预测单元185)可以对要处理的块(当前块)执确定是应用帧内预测还是帧间预测。预测单元可以生成与当前块的预测有关的各种信息，[0096]帧内预测单元185可以通过参考当前画面中的样本来预测当前块。根据帧内预测元185可以通过使用应用于邻近块的预测模式来确定应用于当前块[0097]帧间预测单元180可以基于由参考画面上的运动向量指定的参考块(参考样本阵列)来推导当前块的预测块。在这种情况下，为了减少在帧间预测模式中传输的运动信息块配置运动信息候选列表并生成指示使用哪个候选来推导当前块的运动向量和/或参考画[0098]预测单元可以基于以下描述的各种预测方法和预测技术[0099]预测单元生成的预测信号可用于生成重构信号或生成残差信号。减法器115可以或预测样本阵列)来生成残差信号(残差块或残图形表示时从图形获得的变换。CNT是指基于使用所有先前重构的像素生成的预测信号获[0101]量化器130可以对变换系数进行量化并且将它们传输到熵编码器190。熵编码器190可以对量化的信号(关于量化的变换系数的信息)进行编码并且输出比特流。关于量化变换系数的信息可以被称为残差信息。量化器130可基于系数扫描顺序将块形式的量化变可以包括传输从熵编码器190输出的信号的发送器(未示出)和/或存储该信号的存储单元140和逆变换器150对量化变换系数应用解量化和逆变换来重构残差信号(残差块或残差样[0105]加法器155将重构残差信号与从帧间预测单元180或帧内预测单元185输出的预测器160可以通过对重构画面应用各种滤波方法来生成修改的重构画面，并将修改的重构画波相关的信息可以由熵编码器190编码并以比特流的[0109]存储器170的DPB可以存储修改的重构画面以用作帧间预测单元180中的参考画画面中已经重构的块的运动信息。存储的运动信息可以被传输到帧间预测单元180并用作空间邻近块的运动信息或时间邻近块的运动信息。存储器170可以存储当前画面中重构块的重构样本并且可以将重构样本传送到帧内预[0113]根据实施方式，配置图像解码设备200的多个组件中的全部或至少一些可以由硬[0114]已经接收到包括视频/图像信息的比特流的图像解码设备200可以通过执行与由通过预测bin的出现概率来对bin执行算术解码，并且生成与每个语法元素的值对应的符信息用于下一个符号/bin的上下文模型来更新上下文模型。由熵解码器210解码的信息中[0118]逆变换器230可以对变换系数进行逆变换以获得残差信号(残差块、残差样本阵元可以基于从熵解码器210输出的关于预测的信息来确定是将帧内预测还是帧间预测应用[0120]与在图像编码设备100的预测单元中描述的相同的是，预测单元可以基于稍后描[0121]帧内预测单元265可以通过参考当前画面中的样本来预测当前块。帧内预测单元[0122]帧间预测单元260可以基于参考画面上由运动向量指定的参考块(参考样本阵列)以基于邻近块和当前块之间的运动信息的相关性以块、子块或样本为单元来预测运动信信息候选列表，并且基于接收到的候选选择信息推导当前块的运动向量和/或参考画面索[0123]加法器235可以通过将获得的残差信号与从预测单元(包括帧间预测单元260和/器240可以通过对重构画面应用各种滤波方法来生成修改的重构画面，并将修改的重构画[0126]存储在存储器250的DPB中的(修改的)重构画面可以用作帧间预测单元260中的参考画面。存储器250可以存储从其中推导(或解码)当前画面中的运动信息的块的运动信息和/或画面中已经重构的块的运动信息。存储的运动信息可以被传输到帧间预测单元260，以用作空间邻近块的运动信息或时间邻近块的运动信息。存储器250可以存储当前画面中重构块的重构样本并将重构样本传送到帧内预测185中描述的实施方式可以同等地或对应地应用于图像解码设备200的滤波器240、帧间预[0129]图像编码设备/图像解码设备可以以块为单元执行帧间预测以推导预测样本。帧近块的参考画面可以是相同或不同的。时间邻近块可以被称为并置参考块或并置CU以用信号通知指示使用哪个候选的标志或索引信息以便推导当前块的运动向量和/或参考画面列表L1可以包括按输出顺序在当前画面测模式确定、运动信息推导和预测样本生成过程或者可以在其它过程之前执行其任何一动信息推导单元182和预测样本推导单元183。预测模式确定单元181可以确定当前块的预可以在通过合并候选列表中包括的合并候选指示的参考块当中推导其与当前块的差等于像编码设备可以使用从MVP候选列表中包括的MVP候选当中选择的MVP候选的运动向量作为被用作当前块的运动向量，在MVP候选当中具有与当前块的运动向量的差最小的运动向量的MVP候选可以是所选择的MVP候选。可以推导作为通过从当前块的运动向量减去MVP所获值构建为参考画面索引信息并且单独地用信号通知给图编码设备可以以比特流的形式输出编码的图像信息。预如，跳过标志、合并标志或模式索引等)和关于运动信息的信息作为与预测过程有关的信标志或MVP索引可以在MVP模式应用于当前块时用信号通知，并且可以是用于选择MVP候选[0144]输出比特流可以被存储在(数字)存储介质中并且被发送到图像解码设备或者可构样本和重构块的画面)。这是为了图像编码设备推导与由图像解码设备执行的预测结果可以基于接收到的预测信息来针对当前块执行预流获得。图像解码设备的残差处理器可以基于残差信息来推导当前块的残差样本(S640)。具体地，残差处理器的解量化器220可以基于根据残差信息而推导的量化变换系数来执行解量化以推导变换系数，并且残差处理器的逆变换器230可以针对变换系数执行逆变换以[0150]具体地，图像解码设备可以基于所接收到的预测信息来确定当前块的预测模式[0152]图像解码设备可以基于所确定的帧间预测模式来推导当前块的运动信息(S620并且使用从MVP候选列表中包括的MVP候选当中选择的MVP候选的运动向量作为当前块的参考画面列表中通过参考画面索引指示的画面推导为被参考以进行当前块的帧间预测的以针对当前块的预测样本中的全部或一些执行动信息推导单元262可以基于所接收到的运动信息来推导当前块的运动信息(运动向量和/像解码设备可以基于预测样本和残差样本来生成当前块的重构样本并且基于此来生成重用当前块的原始画面中的原始块来在参考画面中在预定搜索范围内搜索具有高相关性的相似参考块，并且使用其来推导运动信息。可以基于当前块与参考块之间的绝对差之和[0161]图像编码设备可以搜索用于推导当前块的运动信息的合并候选块以执行合并模选列表并且选择具有最小RD成本的合并候选块作为最终合并[0165]图像编码/解码设备可以将通过搜索当前块的空间邻近块推导的空间合并候选插块A0B0步用作空间邻近块。图像编码/解码设备可以通过基于优先级搜索空间邻近块来检测可用[0166]图像编码/解码设备可以将通过搜索当前块的时间邻近块推导的时间合并候选插运动数据压缩以便减少存储器负载时，可以将特定运动信息存储为col画面的每个预定存时，位于修改后的位置((xTnb>>n)<<n),(yTnb>>n)<<n))处的预测块的运动信息可以被用编码/解码设备可以根据预定方法来推导附加合并候选，然后将附加合并候选插入到合并ATMVP、组合双预测合并候选(当当前切片/拼块切片或拼块的对应块或作为帧内预测块的对应块[0175]在图10所示的示例中，可以仅对位置A0处的空间候选执行对位对位置A0和位置B0处的空间候选执行对位置B2处的空间候选[0183]如上所述，当应用运动数据压缩时，可以为各个预定单元块存储col块的运动向候选的位置可以被修改为((xColCi>>3)<<3,CTU行开始时被初始化。将表初始化可以意指通过删除存储在表中的所有基于历史的候选括在表中的基于历史的候选可以被依次检查并且位于合并候选列表的时间候选之后的位[0188]用于生成合并候选列表的基于历史的候选的数量可以被设定为(N<＝4)？M:(8_[0191]可以通过从包括在合并候选列表中的候选获得预定义的候选对并对它们取平均对(0,1)的成对平均候选之后，可以按候选对(0,2)和候选对(1,2)的顺序执行推导成对平执行成对平均候选推导过程直至包括在合并候选列表中的合并候选的数量达到最大合并[0192]可以为各个参考画面列表单独地计算成对平均候选。当对于一个参考画面列表[0193]当即使在成对平均候选被包括在合并候选列表中之后合并候选列表的配置仍未块)的运动向量和/或与时间邻近块(或Col块)对应的运动向量来生成运动向量预测子息推导的mvp候选列表和用于L1运动信息推导的mvp预测的信息)可以包括指示从包括在mvp候选列表中的运动向量预测子候选当中选择的最元可以使用候选选择信息从包括在mvp候选列表中的运动向量预测子候选当中选择当前块块的运动向量减去运动向量预测子来获得MVD。图像解码设备的预测单元可以获得包括在关于预测的信息中的运动向量差并通过运动向量差与运动向量预测子的相加来推导当前[0195]图13是示意性地例示了根据本公开的示例的运动向量预测子候选列表构建方法[0196]首先，可以搜索当前块的空间候选块并且可以将可用候选块插入到MVP候选列表以区别地用信号通知用于L0预测的参考画面索引refidxL0和用于L1预测的参考画面索引值为1时才可以用信号通知指示MVD绝对值是前块关联的两个至四个运动向量来确定块的各个像素和/或子[0205]当仿射模式应用于当前块时，可以使用4参数模型和6参数模型之一来推导仿射[0206]当当前块的位置为(x,y)时，可以根据下式1{mv_1x,mv_1y}可以是当前块的右上位置处的CPMV，mv2＝{mv_2x,mv_2y}可以是当前块的射运动模型可以表示由三个CPMV使用的模型。仿射模式可以根据运动信息编码/解码方法[0214]当仿射合并模式应用于当前块时，可以从以仿射模式编码/解码的当前块的邻近仿射模式标志可以命名为sps_affine_enab[0219]参照图15的流程图，可以按照继承仿射合并候选(S1210)、构建仿射合并候选合并候选直至仿射合并候选列表的候选数量满足[0224]构建仿射候选可以意指具有使用邻近块的一般运动信息的组合推导的CPMV的候通过包括从所推导的各个CP的四个运动向量当中选择的至少两个运动向量来配置构建仿CPMV3}中的至少一个组成。由三个运动向量组成的构建仿射候选可以是6参数仿射模型的[0228]当仿射MVP应用于当前块时，仿射MVP候选列表可以被配置为推导当前块的CPM码时基于邻近块的CPMV推导的候选。构建仿射MVP候选可以意指通过基于CP邻近块的运动法以及继承仿射MVP候选和构建仿射MVP候选的特性与上述继承仿射候选和构建仿射候选[0230]当仿射MVP候选列表的最大候选数量为2时，当当前候选数量小于2时可以添加构[0231]例如，当包括在仿射MVP候选列表中的候选数量小于2并且构建仿射MVP候选的[0235]不管平移运动仿射MVP候选的添加，当仿射MVP候选列表的候选数量小于2时，零[0237]参照图18的流程图，可以按照继承仿射MVP候选(S1610)、构建仿射MVP候选块的TMVP模式，可以推导当前块的运动向量场(MVF)并且可以以子块为单元来推导运动向[0244]当基于子块的TMVP模式应用于当前块时，可以确定用于确定运动移位的邻近移位与当前块的坐标相加来从col画面获得基于子块的运动信息(运动向量或参考画面索子块的中心的四个样本当中的右下样本的位置。当与当前块对应的col块的特定子块的运仿射合并候选和基于子块的TMVP候选可以被合并以配置子块单元至少一个级别用信号通知。例如，基于子块的TMVP模式标志可以命名为sps_sbtmvp_添加到子块单元合并候选列表，然后仿射合并候选可以被添加到子块单元合并候选列表。块)可以包括当前块的预测样本(预测样本阵预测)推导的预测样本的加权和或加权平均(双预测信号(即，双预测样本)能够通过L0预测信号(L0表示L0预测样本(L0预测块)和L1预测[0260]通过加权平均生成双预测信号可以被限制为仅应用于具有包括256个或更多的样[0261]通过应用快速搜索算法，图像编码设备可以确定权重索引而不显著增加复杂[0262]_在运动向量的分辨率自适应地改变的AMVR模式一起应用的情况下，当当前画面[0263]_在仿射模式一起应用并且仿射模式被选为当前块的最佳模式的情况下，图像编[0266]BCW的权重索引可以使用一个上下文编码bin以及一个或更多个后续旁路编码bin包括在参考画面列表L0和L1中的每一个中的各个参考画面用信号通知加权参数(权重和偏[0268]在应用合并模式的CU的情况下，可以基于合并候选索引从邻近块推断权重索[0271](2)当至少两个CP具有相同的BCW权重索引时，相同的BCW权重索引可以被分配为[0273]根据本公开，BDOF可以用于细化双预测信号。BDOF是在双预测应用于当前块(例[0303]最后，可以通过如下调节CU的双预测样本来计算应用BDOF的CU的预测样本不超过15比特并且中间参数的比特宽度维持[0307]为了推导梯度值，可以生成列表k(k＝0,1)中存在于当前CU之外的预测样本I(k)双线性滤波器来生成，并且CU(图21中的灰色区域)中的预测样本可以使用正常8抽头运动外的样本值和/或梯度值以执行BDOF处理的剩余步骤时[0309]当CU的宽度和/或高度大于16个亮度样本时，对应CU可以被划分成具有16个亮度样本的宽度和/或高度的子块。可以在BDOF处理中以与上述CU边界相同的方式处理子块的类似地，当WP可用于当前块时，例如，当两个参考画面中的至少一个的luma_weight_lx_否存在lx预测(x为0或1)的亮度分量的WP的加权因子的信息或者指定是否对lx预测的亮度yy[0339]如上所述，通过在帧间预测处理中应用BDOF以在运动补[0343]当如下满足各种条件时，可以通过将bdofFlag设定为真在运动补偿处理中执行时，或者当luma_weight_l1_flag[refIdxL1]为1时，指定是否应用PROF的信息cbProfFlagLX可以被设定为假。BcwIdx不为0可以意指对当前块应用BCW，并且luma_[0356]下表示出根据本公开设定cbProfFlagLX的另一示例，下划线部分示出添加的条表示是否对L0预测方向或L1预测方向应用PROF，并且根据表3的方法，可以基于bcwIdx、luma_wighted_l0_flag和/或luma_wighted_l1_flag中的至少一个来确定cbProfFlagLX。和/或pps_weighted_bipred_flag中的至少一个来确定cbProfFlagLX。slice_type指定当前画面所属的当前切片的切片类型，pps_weighted_pred_flag是指定是否对参考对应PPS根据表5，即使在PPS处发送的WP应用标志(例如，pps_weighted_pred_flag和/或pps_[0366]参照图23，首先，可以推导指定是否对当前块应用PROF的cbProfFlag(例如，[0368]此后，在步骤S2340中，可以推导指定是否对当前块应用加权预测(WP)的[0369]当weightedPredFlag为假时，可以确定不对当前块应用加权预测并且可以检查通过解析通过比特流用信号通知的语法元素bcw_idx来重构当前块的bcwIdx。如果没有通[0370]在步骤S2360中，当bcwIdx不为0时，可以确定对当前块应用BCW，并且可以基于定为pps_weighted__pred__flag的值。另weightedPredflag可以被确定为pps_weighted_bipred_flag的[0375]根据表6的方法，当如上所述确定的weightedPredFlag为假时，执行默认加权预测，并且当bcwIdx不为0时，BCW，或者当bcwIdx为0时，可以执行平均和。另外，当测标志(例如，luma_weight_l0_f[0378]参照图23以及表5和表6描述的实施方式具有即使bcw_idx不是默认时也执行WP的[0380]参照图24，首先，可以推导指定是否对当前块应用PROF的cbProfFlag(S2410)。[0381]此后，在步骤S2420中，可以检查cbProfFlag是否为真，并且当为真时，在步骤可以获得当前块的细化预测样本。在步骤S2420中，当cbProfFlag为假时，可以跳过步骤[0383]在步骤S2440中，当bcwIdx为0时，可以确定不对当前块应用BCW，此后，在步骤并且可以对当前块执行加权预测(S2470)weightedPredFlag为真并且bcwIdx为0时，可以基于用信号通知的加权参数来执行明确加合并模式时，当前块的bcwIdx可以被推导为由当前块的合并候选索引指定的合并候选的用信号通知的语法元素bcw_idx来重构当前块的bcwIdx。如果没有通过比特流用信号通知[0395]当weightedPredFlag为0时或者当BcwIdx不为0时，可以执行默认加权预测可以根据表6的方法基于当前块所属的当前切片的切片类型以及通过PPS用信号通知的WP应用标志(例如，pps_weighted_pred_flag、pps_weighted_bipred_flag)来推导如0)时，执行默认加权预测，并且可以根据bcwIdx的值执行BCW或平均和。另外，当式(例如，MVP模式)时，当前块的bcwId[0411]根据表9的方法，可以考虑当前块所属的当前切片的切片类型以及由当前块的参考画面索引(ref_idx_l0、ref_idx_l1)指定的参考画面的加权预测标志(例如，luma_weight_l0_flag、luma_weight_l1_flag、chroma_weight_l0_flag、chroma_weight_l1_两个加权预测标志(例如，luma_weight_l0_flag、chroma_weight_l0_flag)均为0时，[0412]当当前块所属的当前切片是B切片并且L0方向和L1方向的所有加权预测标志(例如，luma_weight_l0_flag、luma_weight_l1_flag、chroma_weight_l0_flag、chroma_切片是B切片并且L0方向和L1方向的加权预测标志(例如，luma_weight_l0_flag、luma_导weightedPredFlag(S2720)。当切片类型是B切片时，可以基于luma_weight_l0_flag、chroma_weight_l0_flag、luma_weight_l1_flag和/或chroma_weight_l1_flag来推导[0419]表10示出根据本公开的推导weightedPredFlag并相应地执行WP或BCW的另一示[0422]推导weightedPredFlag的方法与表9的方法和表10的方法相同，因此将省略其详否不为0，并且可以基于确定结果执行步骤S2850的默认加权预测或步骤S2860的明确加权[0428]如上所述，参照图23以及表5和表6描述的实施方式具有即使bcw_idx不是默认仍通过PPS用信号通知的WP应用标志(例如，pps_weighted_pred_flag、pps_weighted_