CN119496911A 用于帧内预测的方法和装置 （华为技术有限公司）

201980072829.32019.11.142当所述块的所述帧内预测模式为广角模式时，通过滤波的参考像素点(filteredreferencesamples)不应用插值滤波器获得3.根据权利要求1或2所述的方法，其特征根据所述块的所述帧内预测模式是否为广角模式，确定是使用滤波5.根据权利要求1至4中任一项所述的方参考像素点获取的所述块的所述预测像素点执行位置相关联合预测(Position_Dependent根据所述块的所述帧内预测模式是否为广角模式，确定是使用滤波述参考像素点获取的所述块的所述预测像素点执行位置相关联合预测(Position_3当所述块的所述帧内预测模式为广角模式时，通过滤波的参考像素点(filtered或多个处理器执行的如权利要求1至7或14中的任所述输入输出接口用于与所述芯片系统之外的其他通信装置进行通信，4的视频译码标准示例。在HEVC中，将译码单元(codingunit，CU)划分为预测单元(predictionunit，PU)或变换单元(transformunit，TU)。通用视频译码(VersatileVideoCoding，VVC)下一代标准是ITU_T视频译码专家组(VideoCodingExpertsGroup，项目，这两个标准化组织共同合作，其伙伴关系被称为联合视频探索小组(JointVideoExplorationTeam，JVET)。VVC也称为ITU_TH.266/下一代视频译码(NextGeneration[0009]ITU_TVCEG(Q6/16)和ISO/IECMPEG(JTC1/SC29/WG11)正在研究未来视频译5家组正在联合开展这一探索活动，称为联合视频探索小组(JointVideoExploration[0010]通用测试模型(VersatileTestModel，VTM)标准使用35种帧内模式，而基准集[0015]第一方面的目标是将参考像素点处理与方向预测的输出和用于提高预测块的视6[0024]本发明第二方面提供的方法的其它特征和实现方式对应于本发明第一方面提供计算机中执行时执行所述第一方面或所述第一方面的任意[0045]图19示出了在插值滤波器选择过程中用于阈值化帧内预测模式的替代方向的示[0051]图25是用于对视频的当前图像中的当前图像块进行帧内预测的装置的示例结构7[0059]PDPCPPosition[0071]H.264/AVC和HEVC等视频译码方案是按照基于块的混合视频译码的成功原理而设域中的空间预测和时间预测与变换域中用于应用量化的2D变换译码结合)。视频序列中的ITU_T视频译码专家组(VideoCodingExpertsGroup，VCEG)和ISO/IEC运动图像专家组(MotionPictureExpertsGroup，MPEG)的视频译码联合工作组(JointCollaborationTeamonVideoCoding，JCT_VC)研发的高效视频译码(High_EfficiencyVideoCoding，8过表示为译码树的四叉树结构将CTU划分成CU。在CU级决定是使用帧间(时间)预测还是帧CTU)。通过二叉树结构进一步分割四叉树叶节点。二叉树叶节点称为译码单元(coding[0074]ITU_TVCEG(Q6/16)和ISO/IECMPEG(JTC1/SC29/WG11)正在研究未来视频译家组正在联合开展这一探索活动，称为联合视频探索小组(JointVideoExploration[0075]通用测试模型(VersatileTestModel，VTM)使用35种帧内模式，而基准集(例如，视频解码器30)表示可以用于根据本申请中描述的各种示例执行各技术的设备示虚拟现实(virtualreality，VR)图像)和/或其任何组合(例如，增强现实(augmented点也可以称为像素(pixel或pel)(图像线)上的像素点数量定义了图像的大小和/或分辨率。通常采用三种颜色分量来表示颜色，9图像包括亮度像素点值(Y)的亮度像素点阵列和色度值(Cb和Cr)的两个色度像素点阵列。[0086]目的地设备14的通信接口28用于接收经编码的图像数据21[0087]通信接口22和通信接口28可以用于通过源设备12与目的地设备14之间的直接通[0089]形成通信接口22的对应部分的通信接口28可以例如用于对编码数据13进行解包[0090]通信接口22和通信接口28均可配置为单向通信接口(如图1中从源设备12指向目[0091]解码器30用于接收经编码的图像数据21并提供经解码的图像数据31或解码图像[0092]目的地设备14的后处理器32用于对经解码的图像数据31(也称为经重建的图像数集成或外部的显示器或监视器。例如，显示器可以包括液晶显示器(liquidcrystal[0094]尽管图1将源设备12和目的地设备14作为单独的设备进行描述，但是设备实施例还可以包括两种设备或两种功能，即源设备12或对应功能以及目的地设备14或对应功能。和/或软件或通过单独的硬件和/或软件或其任为各种合适电路中的任一种，如一个或多个微处理器、数字信号处理器(digitalsignal可以作为组合的编码器/解码器(编解码器)的一部分集成在相应设以包括运动估计单元和运动补偿单元(未示出)。列的图像序列的图像)的块203。图像块203也可以称为当前图像块或待译码图像块，图像和/或来自解码图像缓冲230的一个或多个先前解码图像的参考图像数据231，并处理此类[0102]模式选择单元262的实施例可用于选择预测模式(例如，从预测处理单元260支持中更好的压缩)，或提供最小指示(signaling)开销(最小指示开销指传输或存储中更好的压缩)，或者同时考虑或平衡以上两者。模式选择单元262可用于根据率失真优化(rate或者选择至少满足预测模式选择标准的相关[0103]帧内预测单元254还用于根据帧内预测参数(例如，所选帧内预测模式)确定帧内预测单元254可用于执行下文描述的帧内预测技术[0104]图3为用于实现本申请技术的示例性视频解码器30。视频解码器30用于接收例如码过程中，视频解码器30从视频编码器100接收视频数据，例如表示经编码的视频条带(slice)的图像块的经编码的视频码流[0106]熵解码单元304用于对经编码的图像数据21执行熵解码，以获得量化系数309和/数和/或其它语法元素中的(解码的)任一者或全部。熵解码单元304还用于将帧间预测参[0107]反量化单元310的功能可以与反量化单元110的功能相同；逆变换处理单元312的功能可以与逆变换处理单元112的功能相同；重建单元314的功能可以与重建单元114的功单元344的功能可以与帧间预测单元144的功能类似，帧内预测单元354的功能可以与帧内预测单元154的功能类似。预测处理单元360通常用于根据编码数据21进行块预测和/或获得预测块365，并用于从熵解码单元304等接收或获得(显式或隐式地)预测相关参数和/或[0109]当将视频条带译码为帧内译码(I)条带时，预测处理单元360的帧内预测单元354用于根据指示的帧内预测模式和来自当前帧或图像的先前解码块的数据生成当前视频条像列表中的其中一个参考图像产生这些预测块。视频解码器30可以根据存储在DPB330中[0110]预测处理单元360用于通过解析运动矢量和其它语法元素来确定当前视频条带的处理单元360使用接收到的一些语法元素确定用于对视频条带的视频块进行译码的预测模[0111]反量化单元310用于对码流中提供并由熵解码单元304解码的量化变换系数进行[0113]重建单元314(例如，求和器314)用于通过将重建残差块313的像素点值和预测块ALF)或锐化或平滑滤波器或协作滤波器。尽管环路滤波器单元320在图3中示为环路滤波频解码器30可以具有组合成单个单元的反量化单元310和逆变换处理单元[0119]图4A示出了如针对VVC提出的67种帧内预测模式的示例，67种帧内预测模式的多[0123]如果选择三次滤波器，则将预测像素点进一步修正(clip图6示出了针对核心实验CE3_3.1.3(J[0132]如果用于内插像素值的色度运动补偿子像素滤波器的查找表和硬件模块在参考参考像素点插值的滤波系数的位数应与运动子像素运动补偿插值滤[0133]图12示出了本发明提出的一个实施例。具有6位色度系数的4抽头插值滤波器(也[0135]另一实施例示出在仅重复使用滤波系数的LUT时的实施例(参见图14)。在该实现选择用于帧内预测处理的主边长度来确定待使用的滤波主参考像素点时，也可以使用统一插值滤波器对边参考像素点进行滤波(详见JVET_容，参见[XiaozhongXu、ShanLiu、Tzu_DerChuang、Yu_WenHuang、ShawminLei、KrishnakanthRapaka、ChaoPang、VadimSeregin、Ye_KuiWang、MartaKarczewicz：《HEVC屏幕内容译码扩展中的块内复制(IntraBlockCopyinHEVCScreenContentCodingExtensions)》.IEEEJ.Emerg.Sel.TopicsCircuitsSyst.6(4):409_419 W,H分别为待预测块的宽度和高度。[0170]本发明旨在改进帧内模式指示方案。本发明提出一种视频解码方法和视频解码[0176]H.264/AVC和HEVC规定低通滤波器可以在用于帧内预测过程之前应用于参考像素个决策目前都基于帧内预测模式与对角线(45度即使根据模式比较标准选择较短的边作为主[0185]本发明提供在插值滤波器选择过程中使用替代方向来确定帧内预测模式的阈[0190]角度对应于帧内方向m的直线将预测块划分为两个区域。使用不同的插值滤波器滤波长度滤波系数01132535括以下各项：[0211]对于对角线模式(在图4A和图4B中表示为2和66)和相邻模式(在图4A或图4B中不x,–1的坐标x通过以下[0215]类似地，图22(b)示出了PDPC扩展到左下对角线模式的参考像素点Rx,–1、R-1,y和左下对角线模式的情况如图22(d)所示。相邻的左下对角线模式的PDPC权重为：wL＝32>>S[0232]本发明的实施例的目标是将参考像素点处理与方向预测的输出和用于提高预测[0262]x＝0……refW_1和y＝0……refH_1的参考像素点阵列mainRef[x]和sideRef[y][0266]_当predModeIntra等于INTRA_PLANAR、INTRA_DC、INTRA_ANGULAR18或INTRA_＝＝[0308]predSamples[x][y]＝clip1Cmp((refL[x][y]*wL[x]+refT[[0324]其中，在步骤3中使用的输入参考像素点与在步骤1中获得并在步骤2中使用的整[0326]根据predModeIntra，确定应使用滤波的参考像素点缓冲还是使用未滤波的参考[0328]使得能够使用所提出的方法的VVC规范的修改可以包括在描述简化PDPC的部分中[0329]角度参数intraPredAngle表示分数部分长度等于5位的定点表示中相邻两行预测像素点之间的子像素偏移。该参数可以从帧内预测模式推导得出，intraPredAngle从predModeIntra推导得出。示例性的从predModeIntra推导intraPredAngle可以通过LUT来[0334]视频译码通常指对视频或视频序列的图像序列的处理。术语“图像(picture/[0351]根据predModeIntra确定是使用滤波的参考像素点缓冲还是使用未滤波的参考像[0355]根据块大小参数确定是使用滤波的参考像素点缓冲还是使用未滤波的参考像素[0356]实施例13.根据实施例12所述的方法，如果intraP[0363]图25是用于对视频的当前图像中的当前图像块进行帧内预测的装置2500的示例[0366]图26为可用于实现各种实施例的装置1500的框图。装置1500可以是图1所示的源等。装置1500可包括连接到总线的一个或多个中央处理单元(centralprocessingunit，[0368]视频适配器1540和I/O接口1560提供接口以使外部输入和输出设备与装置1500耦视频适配器1540耦合的显示器1590和与I/O接口1560耦合的鼠标/键盘/打印机1570的任何[0370]下面描述上述实施例中所示的编码方法和解码方法以及使用这些方法的系统的[0372]捕获设备3102生成数据，并可使用上述实施例中所示的编码方法对数据进行编数据和编码音频数据复用在一起来分发编码视频数据和编码音频数据。在其它实际场景频数据和编码视频数据分别分发到终端设备[0373]内容供应系统3100中的终端设备310接收并再现编码数据。终端设备3106可以为网络视频录像机(networkvideorecorder，NVR)/数字视频录像机(digitalvideo[0374]对于带显示器的终端设备，如智能手机或平板电脑3108、计算机或笔记本电脑传输协议(RealTimeStreamingProtocol，RTSP)、超文本传输协议(HyperTextMPEG_DASH、实时传输协议(Real_timeTransportprotocol，RTP)、实时消息传输协议[0379]同步单元3212同步视频帧和音频帧，并将视频/音频供应给视频/音频显示器[0385]本发明中描述的过程和逻辑流可由执行一个或多个计算机程序的一个或多个可也可由现场可编程门阵列(fieldprogrammablegatearray，FPGA)或专用集成电路(GlobalPositioningSystem，GPS)接收器或便携式存储设备(例如，通用串行总线和存储器可由专用逻辑电路进行补充或并入专用逻辑独实现方式的上下文中，本发明中所描述的某些特征也可以在单个实现方式中组合实现。