CN114051733B 图像处理装置和图像处理方法 （索尼集团公司）

2021.12.10PCT/JP2020/0224852020WO2020/255769JA2020.12.24BenjaminBross.VersatileVi本技术涉及能够简化处理的图像处理装置和图像处理方法。当对要编码/解码的当前预测块执行作为使用矩阵运算的帧内预测的矩阵帧然后，使用预测图像对当前预测块进行编码/解2帧内预测单元，其被配置成：当对要编码的当前预测块述当前预测块的预测图像，其中所述固定值是与所述矩阵帧内预测的模式无关的固定的编码单元，其被配置成使用由所述帧内预测单所述帧内预测单元基于根据被设置为所述固定值的移位量而改变的运算来执行所述所述帧内预测单元基于包括根据被设置为所述固定值的移位量而改变的权重矩阵的所述帧内预测单元基于包括根据被设置为所述固定值的移位量而改变的偏置向量或所述固定值是根据在所述矩阵帧内预测中使用的矩阵大小而所述固定值是针对在所述矩阵帧内预测中使用的矩阵大小的每个标识符而设置的固帧内预测处理：当对要编码的当前预测块执行作为使用编码处理：使用在所述帧内预测处理中生成的所述帧内预测单元，其被配置成：当对要解码的当前预测块3述当前预测块的预测图像，其中所述固定值是与所述矩阵帧内预测的模式无关的固定的解码单元，其被配置成使用由所述帧内预测单元生成的所述预测帧内预测处理：当对要解码的当前预测块执行作为使用解码处理：使用在所述帧内预测处理中生成的所述预测图像来对所述4比进一步提高编码效率，并且致力于作为下一代图像编码方法的通用视频编码(VVC)的标[0008]非专利文献2：JVET-00084-vl:8-bitimplementationandsimplification5[0030]图9是示出参考文献A中描述的(M,m)＝(0,0)的标准权重矩阵mWeight[i][j]的[0031]图10是示出参考文献A中描述的(M,m)＝(0,1)的标准权重矩阵mWeight[i][j]的[0032]图11是示出参考文献A中描述的(M,m)＝(0,2)的标准权重矩阵mWeight[i][j]的[0033]图12是示出参考文献A中描述的(M,m)＝(0,3)的标准权重矩阵mWeight[i][j]的[0034]图13是示出参考文献A中描述的(M,m)＝(0,4)的标准权重矩阵mWeight[i][j]的[0035]图14是示出参考文献A中描述的(M,m)＝(0,5)的标准权重矩阵mWeight[i][j]的6[0036]图15是示出参考文献A中描述的(M,m)＝(0,6)的标准权重矩阵mWeight[i][j]的[0037]图16是示出参考文献A中描述的(M,m)＝(0,7)的标准权重矩阵mWeight[i][j]的[0038]图17是示出参考文献A中描述的(M,m)＝(0,8)的标准权重矩阵mWeight[i][j]的[0039]图18是示出参考文献A中描述的(M,m)＝(0,9)的标准权重矩阵mWeight[i][j]的[0040]图19是示出参考文献A中描述的(M,m)＝(0,10)的标准权重矩阵mWeight[[0041]图20是示出参考文献A中描述的(M,m)＝(0,11)的标准权重矩阵mWeight[[0042]图21是示出参考文献A中描述的(M,m)＝(0,12)的标准权重矩阵mWeight[[0043]图22是示出参考文献A中描述的(M,m)＝(0,13)的标准权重矩阵mWeight[[0044]图23是示出参考文献A中描述的(M,m)＝(0,14)的标准权重矩阵mWeight[[0045]图24是示出参考文献A中描述的(M,m)＝(0,15)的标准权重矩阵mWeight[[0046]图25是示出参考文献A中描述的(M,m)＝(0,16)的标准权重矩阵mWeight[[0047]图26是示出参考文献A中描述的(M,m)＝(0,17)的标准权重矩阵mWeight[[0049]图28是示出参考文献A中描述的(M,m)＝(1,0)的标准权重矩阵mWeight[i][j]的[0050]图29是示出参考文献A中描述的(M,m)＝(1,1)的标准权重矩阵mWeight[i][j]的[0051]图30是示出参考文献A中描述的(M,m)＝(1,2)的标准权重矩阵mWeight[i][j]的[0052]图31是示出参考文献A中描述的(M,m)＝(1,3)的标准权重矩阵mWeight[i][j]的[0053]图32是示出参考文献A中描述的(M,m)＝(1,4)的标准权重矩阵mWeight[i][j]的[0054]图33是示出参考文献A中描述的(M,m)＝(1,5)的标准权重矩阵mWeight[i][j]的[0055]图34是示出参考文献A中描述的(M,m)＝(1,6)的标准权重矩阵mWeight[i][j]的7[0056]图35是示出参考文献A中描述的(M,m)＝(1,7)的标准权重矩阵mWeight[i][j]的[0057]图36是示出参考文献A中描述的(M,m)＝(1,8)的标准权重矩阵mWeight[i][j]的[0058]图37是示出参考文献A中描述的(M,m)＝(1,9)的标准权重矩阵mWeight[i][j]的[0060]图39是示出参考文献A中描述的(M,m)＝(2,0)的标准权重矩阵mWeight[i][j]的[0061]图40是示出参考文献A中描述的(M,m)＝(2,1)的标准权重矩阵mWeight[i][j]的[0062]图41是示出参考文献A中描述的(M,m)＝(2,2)的标准权重矩阵mWeight[i][j]的[0063]图42是示出参考文献A中描述的(M,m)＝(2,3)的标准权重矩阵mWeight[i][j]的[0064]图43是示出参考文献A中描述的(M,m)＝(2,4)的标准权重矩阵mWeight[i][j]的[0065]图44是示出参考文献A中描述的(M,m)＝(2,5)的标准权重矩阵mWeight[i][j]的[0068]图47是示出第三生成方法中使用的(M,m)＝(0,0)的固定权重矩阵mWeigh[0069]图48是示出第三生成方法中使用的(M,m)＝(0,1)的固定权重矩阵mWeigh[0070]图49是示出第三生成方法中使用的(M,m)＝(0,2)的固定权重矩阵mWeigh[0071]图50是示出第三生成方法中使用的(M,m)＝(0,3)的固定权重矩阵mWeigh[0072]图51是示出第三生成方法中使用的(M,m)＝(0,4)的固定权重矩阵mWeigh[0073]图52是示出第三生成方法中使用的(M,m)＝(0,5)的固定权重矩阵mWeigh[0074]图53是示出第三生成方法中使用的(M,m)＝(0,6)的固定权重矩阵mWeigh[0075]图54是示出第三生成方法中使用的(M,m)＝(0,7)的固定权重矩阵mWeigh[0076]图55是示出第三生成方法中使用的(M,m)＝(0,8)的固定权重矩阵mWeigh8[0077]图56是示出第三生成方法中使用的(M,m)＝(0,9)的固定权重矩阵mWeigh[0078]图57是示出第三生成方法中使用的(M,m)＝(0,10)的固定权重矩阵mWeight[i][0079]图58是示出第三生成方法中使用的(M,m)＝(0,11)的固定权重矩阵mWeight[i][0080]图59是示出第三生成方法中使用的(M,m)＝(0,12)的固定权重矩阵mWeight[i][0081]图60是示出第三生成方法中使用的(M,m)＝(0,13)的固定权重矩阵mWeight[i][0082]图61是示出第三生成方法中使用的(M,m)＝(0,14)的固定权重矩阵mWeight[i][0083]图62是示出第三生成方法中使用的(M,m)＝(0,15)的固定权重矩阵mWeight[i][0084]图63是示出第三生成方法中使用的(M,m)＝(0,16)的固定权重矩阵mWeight[i][0085]图64是示出第三生成方法中使用的(M,m)＝(0,17)的固定权重矩阵mWeight[i][0087]图66是示出第三生成方法中使用的(M,m)＝(1,0)的固定权重矩阵mWeigh[0088]图67是示出第三生成方法中使用的(M,m)＝(1,1)的固定权重矩阵mWeigh[0089]图68是示出第三生成方法中使用的(M,m)＝(1,2)的固定权重矩阵mWeigh[0090]图69是示出第三生成方法中使用的(M,m)＝(1,3)的固定权重矩阵mWeigh[0091]图70是示出第三生成方法中使用的(M,m)＝(1,4)的固定权重矩阵mWeigh[0092]图71是示出第三生成方法中使用的(M,m)＝(1,5)的固定权重矩阵mWeigh[0093]图72是示出第三生成方法中使用的(M,m)＝(1,6)的固定权重矩阵mWeigh[0094]图73是示出第三生成方法中使用的(M,m)＝(1,7)的固定权重矩阵mWeigh[0095]图74是示出第三生成方法中使用的(M,m)＝(1,8)的固定权重矩阵mWeigh[0096]图75是示出第三生成方法中使用的(M,m)＝(1,9)的固定权重矩阵mWeigh9[0098]图77是示出第三生成方法中使用的(M,m)＝(2,0)的固定权重矩阵mWeigh[0099]图78是示出第三生成方法中使用的(M,m)＝(2,1)的固定权重矩阵mWeigh[0100]图79是示出第三生成方法中使用的(M,m)＝(2,2)的固定权重矩阵mWeigh[0101]图80是示出第三生成方法中使用的(M,m)＝(2,3)的固定权重矩阵mWeigh[0102]图81是示出第三生成方法中使用的(M,m)＝(2,4)的固定权重矩阵mWeigh[0103]图82是示出第三生成方法中使用的(M,m)＝(2,5)的固定权重矩阵mWeigh[0106]图85是示出第四生成方法中使用的(M,m)＝(0,0)的固定权重矩阵mWeigh[0107]图86是示出第四生成方法中使用的(M,m)＝(0,1)的固定权重矩阵mWeigh[0108]图87是示出第四生成方法中使用的(M,m)＝(0,2)的固定权重矩阵mWeigh[0109]图88是示出第四生成方法中使用的(M,m)＝(0,3)的固定权重矩阵mWeigh[0110]图89是示出第四生成方法中使用的(M,m)＝(0,4)的固定权重矩阵mWeigh[0111]图90是示出第四生成方法中使用的(M,m)＝(0,5)的固定权重矩阵mWeigh[0112]图91是示出第四生成方法中使用的(M,m)＝(0,6)的固定权重矩阵mWeigh[0113]图92是示出第四生成方法中使用的(M,m)＝(0,7)的固定权重矩阵mWeigh[0114]图93是示出第四生成方法中使用的(M,m)＝(0,8)的固定权重矩阵mWeigh[0115]图94是示出第四生成方法中使用的(M,m)＝(0,9)的固定权重矩阵mWeigh[0116]图95是示出第四生成方法中使用的(M,m)＝(0,10)的固定权重矩阵mWeight[i][0117]图96是示出第四生成方法中使用的(M,m)＝(0,11)的固定权重矩阵mWeight[i][0118]图97是示出第四生成方法中使用的(M,m)＝(0,12)的固定权重矩阵mWeight[i][0119]图98是示出第四生成方法中使用的(M,m)＝(0,13)的固定权重矩阵mWeight[i][0120]图99是示出第四生成方法中使用的(M,m)＝(0,14)的固定权重矩阵mWeight[i][0121]图100是示出第四生成方法中使用的(M,m)＝(0,15)的固定权重矩阵mWeight[i][0122]图101是示出第四生成方法中使用的(M,m)＝(0,16)的固定权重矩阵mWeight[i][0123]图102是示出第四生成方法中使用的(M,m)＝(0,17)的固定权重矩阵mWeight[i][0125]图104是示出第四生成方法中使用的(M,m)＝(1,0)的固定权重矩阵mWeight[i][0126]图105是示出第四生成方法中使用的(M,m)＝(1,1)的固定权重矩阵mWeight[i][0127]图106是示出第四生成方法中使用的(M,m)＝(1,2)的固定权重矩阵mWeight[i][0128]图107是示出第四生成方法中使用的(M,m)＝(1,3)的固定权重矩阵mWeight[i][0129]图108是示出第四生成方法中使用的(M,m)＝(1,4)的固定权重矩阵mWeight[i][0130]图109是示出第四生成方法中使用的(M,m)＝(1,5)的固定权重矩阵mWeight[i][0131]图110是示出第四生成方法中使用的(M,m)＝(1,6)的固定权重矩阵mWeight[i][0132]图111是示出第四生成方法中使用的(M,m)＝(1,7)的固定权重矩阵mWeight[i][0133]图112是示出第四生成方法中使用的(M,m)＝(1,8)的固定权重矩阵mWeight[i][0134]图113是示出第四生成方法中使用的(M,m)＝(1,9)的固定权重矩阵mWeight[i][0136]图115是示出第四生成方法中使用的(M,m)＝(2,0)的固定权重矩阵mWeight[i][0137]图116是示出第四生成方法中使用的(M,m)＝(2,1)的固定权重矩阵mWeight[i][0138]图117是示出第四生成方法中使用的(M,m)＝(2,2)的固定权重矩阵mWeight[i][0139]图118是示出第四生成方法中使用的(M,m)＝(2,3)的固定权重矩阵mWeight[i][0140]图119是示出第四生成方法中使用的(M,m)＝(2,4)的固定权重矩阵mWeight[i][0141]图120是示出第四生成方法中使用的(M,m)＝(2,5)的固定权重矩阵mWeight[i]四叉树加二叉树(QTBT)块结构和多类型树(MTT)块结构，它们也在本公开内容的范围内并[0151]REF1：RecommendationITU-TH.264(04/2017)“Advancedvideocodingfor[0153]REF3：BenjaminBross,JianleChen,ShanLiu,VersatileVideoCoding(Draft[0154]REF4：JianleChen,YanYe,SeungHwanKim,Algorithmdescriptionfor[0155]REF5：JVET-N0217-v3:CE3:Affinelinearweightedintraprediction(CE3-[0156]REF6：JVET-M0043-v2:CE3:Affinelinearweightedintraprediction(test[0157]REF7：JVET-O0084-vl:8-bitimplementationandsimplificationofMIP测块中的子块。当预测块、作为用于执行正交变换的处理单元的正交变换块(变换单元[0162]矩阵帧内预测模式(MIP模式)全面地意指在得到矩阵帧内预测模式时参考的变量下文中，也称为参考文献A)中描述的内容的改变，该文献在提交时已知的其他文档例如公布。改变包括将混合移位量sW的9改变为8、改变包括权重矩阵mWeight的MIP运算(矩阵运算)、[0170]第一生成方法是在参考文献REF3(JVET-N1001-v7)中提出的用于生成MIP的预测为要编码/解码的预测块的当前预测块的预测图像的(一些)像素的predMip[x][y](像素[0172]predMip[x][y]＝((∑mWeight[i][y*incH*predC+x*incW]*p[i])+(vBias[y*[0173]predMip[x][y]表示预测图像的水平位置为x且其竖直位置为y的像素(像素值)。[0174]在等式(1)中，和∑表示在将变量i改变为从0到2*boundarySize-1的整数时得到行运算(矩阵运算)所使用的矩阵(权重矩阵mWeight[i][j])的矩阵大小的标识符。当矩阵[0176]权重矩阵mWeight[i][j]的自变量i和j所取的值的数目分别等于通过在参考文献REF5中求平均而获得的像素的数目和预测图像的像素predMipmWeight[i][y*incH*predC+x*incW]*p[i]是用于获得其分量为权重矩阵mWeight[i][j]的矩阵与其分量为当前预测块的像素p[i]的向量的乘积的矩[0181]p[i]表示通过使用当生成当前预测块的预测图像时参考的参考图像的像素进行据sizeId和modeId设置偏置向量vBias[j]。偏置向量vBias[j]的自变量j所取的值的数目等于权重矩阵mWeight[i][j]的自变量j所取的值的数目，即预测图像的像素predMip[x][0188]在第一生成方法中，sW是使((ΣmWeight[i][y*incH*predC+x*incW]*p[i])+[0194]在第二生成方法中，将在参考文献REF3(JVET-N1001-v7)中提出的用于生成MIP或偏置向量vBias[j]的运算来生成MIP的[0196]此处，MipSizeId和modeId的组合表示为(M,m)。M表示MipSizeId并且m表示当根据参考文献REF3获得(MIP的预测图像的)预测像素predMip[x][y]时获得的预测像素predMip[x][y]——也称为标准预测像素pre为当将(M,m)＝(1,3)和(M,m)＝(1,8)的移位量sW改变为8时根据等式(1)predMip[x][y]——变为近似标准预测像素predMip[x][0200]在第二生成方法中，根据包括根据如上所述被设置为固定值的移位量sW＝8而改变的权重矩阵mWeight[i][j]和偏置向量vBias[j]的等式(1)的运算来生成MIP的预测图使用的(M,m)＝(1,3)的标准权重矩阵mWeight[i][j]的修改的权重矩阵mWeight[i][j]称[0206]在图3中，在从左侧起的第i+1个值处，从顶部起的第j+1个值表示权重矩阵等式(8-69)中向右执行的移位量sW已经从9改在可以针对预测图像获得诸如确保预定的预测精度或更高预测精度的技术效果的范围内，[0211]另外，取决于设置的固定预测像素predMip[x][y]近似标准预测像素predMip[x][0212]例如，可以基于图3的B中所示的值在±1的范围内或者可以在±3的范围内改变[0213]对(M,m)＝(1,定权重矩阵mWeight[i][j]的全部上进行，但是可以仅在(M,m)＝(1,3)的固定权重矩阵[0215]例如，可以针对相应的标准权重矩阵mWeight[i][j]的每个值单独地设置其中改MipSizeId＝1的标准偏置向量vBiaMipSizeId＝1的标准偏置向量vBias[j]在MipSizeId＝1的移位量sW改变为8时的偏置向量[0224]图5的A是示出MipSizeId＝1的标准偏置向量vBias[j]的图，并且图5的B是示出MipSizeId＝1的固定偏置向量vBias[j]的示例(1,8)的固定偏置向量vBias[j]改变为(M,m)＝(1,3)和(1,8几乎1/2倍，以由虚线围绕，并且其他固定偏置向量vBias[j]与标准偏置向量vBias[j]相[0228]在第三生成方法中，将在参考文献A(JVET-N1001-v7_proposal_textMIP_8Bit.docx)(以及参考文献REF7)中提出的用于生成MIP的预测图像的运算的移位量sW设69)的等式(2)生成当前预测块的预测图像的(一些)像素[0230]predMip[x][y]=[0231]在等式(2)中，和∑表示将变量i改变为从0到inSize-1的整数时所取得的和。＜＜[0235]根据MipSizeId和modeId设置变量fO。由于与偏置向量vBias[j]相对应的变量oW是使用变量fO根据等式(3)计算的，因此，类似于变量oW，变量fO也可以对应于偏置向量[0238]因此，在参考文献A中提出的预测图像的生成中，存在与第一生成方法类似的问8中描述的6至8中的最小值6作为针对移位量s[0243]然后，根据固定移位量sW＝6，改变标准权重矩阵mWeight[i][j]和与偏置向量固定预测像素predMip[x][y]是近似标准预测像素predMi[0245]在第三生成方法中，根据包括固定权重矩阵mWeight[i][j]和固定变量fO的等式是如上所述通过根据被设置为固定值的移位量sW＝6改变标准权重矩阵mWeight[i][j]和在参考文献A中提出的用于生成MIP的预测图像的运算的移位量针对每个MipSizeId将移位量sW设[0252]在第四生成方法中，根据针对每个MipSizeId被设置为固定值的移位量sW来改变[0253]在第四生成方法中，作为在移动量sW中设置的针对每个MipSizeId的固定值，例如，可以采用参考文献A的表8-8中描述的针对每个MipSizeId的移动量sW的最小值或最大表8-8中描述的针对每个MipSizeId的移位量sA的表8-8中描述的针对每个MipSizeId的移位量sW的最小值作为在移位量sW中设置的针对A的表8-8中描述的针对每个MipSizeId的移位量sW的最小值作为在移位量sW中设置的针对A的表8-8中描述的针对每个MipSizeId的移位量sW的最小值作为在移位量sW中设置的针对得使用移位量sW＝6根据等式(2)获得的固定预测像素predMip[x][y]是近似标准预测像素的移位量sW＝6改变标准权重矩阵mWeight[i][j]和得使用移位量sW＝7根据等式(2)获得的固定预测像素predMip[x][y]是近似标准预测像素的移位量sW＝7改变标准权重矩阵mWeight[i][j]和算的运算的等式以及其中根据被固定为7的移位量sW改变等式(2)的运算的运算的等式的[0272]图9是示出参考文献A中描述的(M,m)＝(0,0)的标准权重矩阵mWeight[i][j]的[0273]在图9中，在从左侧起的第i+1个值处，从顶部起的第j+1个值表示标准权重矩阵[0274]图10是示出参考文献A中描述的(M,m)＝(0,1)的标准权重矩阵mWeight[i][j]的[0275]图11是示出参考文献A中描述的(M,m)＝(0,2)的标准权重矩阵mWeight[i][j]的[0276]图12是示出参考文献A中描述的(M,m)＝(0,3)的标准权重矩阵mWeight[i][j]的[0277]图13是示出参考文献A中描述的(M,m)＝(0,4)的标准权重矩阵mWeight[i][j]的[0278]图14是示出参考文献A中描述的(M,m)＝(0,5)的标准权重矩阵mWeight[i][j]的[0279]图15是示出参考文献A中描述的(M,m)＝(0,6)的标准权重矩阵mWeight[i][j]的[0280]图16是示出参考文献A中描述的(M,m)＝(0,7)的标准权重矩阵mWeight[i][j]的[0281]图17是示出参考文献A中描述的(M,m)＝(0,8)的标准权重矩阵mWeight[i][j]的[0282]图18是示出参考文献A中描述的(M,m)＝(0,9)的标准权重矩阵mWeight[i][j]的[0283]图19是示出参考文献A中描述的(M,m)＝(0,10)的标准权重矩阵mWeight[[0284]图20是示出参考文献A中描述的(M,m)＝(0,11)的标准权重矩阵mWeight[[0285]图21是示出参考文献A中描述的(M,m)＝(0,12)的标准权重矩阵mWeight[[0286]图22是示出参考文献A中描述的(M,m)＝(0,13)的标准权重矩阵mWeight[[0287]图23是示出参考文献A中描述的(M,m)＝(0,14)的标准权重矩阵mWeight[[0288]图24是示出参考文献A中描述的(M,m)＝(0,15)的标准权重矩阵mWeight[[0289]图25是示出参考文献A中描述的(M,m)＝(0,16)的标准权重矩阵mWeight[[0290]图26是示出参考文献A中描述的(M,m)＝(0,17)的标准权重矩阵mWeight[[0293]图28是示出参考文献A中描述的(M,m)＝(1,0)的标准权重矩阵mWeight[i][j]的[0294]图29是示出参考文献A中描述的(M,m)＝(1,1)的标准权重矩阵mWeight[i][j]的[0295]图30是示出参考文献A中描述的(M,m)＝(1,2)的标准权重矩阵mWeight[i][j]的[0296]图31是示出参考文献A中描述的(M,m)＝(1,3)的标准权重矩阵mWeight[i][j]的[0297]图32是示出参考文献A中描述的(M,m)＝(1,4)的标准权重矩阵mWeight[i][j]的[0298]图33是示出参考文献A中描述的(M,m)＝(1,5)的标准权重矩阵mWeight[i][j]的[0299]图34是示出参考文献A中描述的(M,m)＝(1,6)的标准权重矩阵mWeight[i][j]的[0300]图35是示出参考文献A中描述的(M,m)＝(1,7)的标准权重矩阵mWeight[i][j]的[0301]图36是示出参考文献A中描述的(M,m)＝(1,8)的标准权重矩阵mWeight[i][j]的[0302]图37是示出参考文献A中描述的(M,m)＝(1,9)的标准权重矩阵mWeight[i][j]的[0304]图39是示出参考文献A中描述的(M,m)＝(2,0)的标准权重矩阵mWeight[i][j]的[0305]图40是示出参考文献A中描述的(M,m)＝(2,1)的标准权重矩阵mWeight[i][j]的[0306]图41是示出参考文献A中描述的(M,m)＝(2,2)的标准权重矩阵mWeight[i][j]的[0307]图42是示出参考文献A中描述的(M,m)＝(2,3)的标准权重矩阵mWeight[i][j]的[0308]图43是示出参考文献A中描述的(M,m)＝(2,4)的标准权重矩阵mWeight[i][j]的[0309]图44是示出参考文献A中描述的(M,m)＝(2,5)的标准权重矩阵mWeight[i][j]的fO而获得的固定权重矩阵mWeight[i][j]以及固定变量fO，使得在将移位量sW设置为固定值6之后获得的固定预测像素predMip[x][y]是近似标准预测像素predMip[x][0314]图47是示出在第三生成方法中使用的(M,m)＝(0,0)的固定权重矩阵mWeight[i][0315]图48是示出在第三生成方法中使用的(M,m)＝(0,1)的固定权重矩阵mWeight[i][0316]图49是示出在第三生成方法中使用的(M,m)＝(0,2)的固定权重矩阵mWeight[i][0317]图50是示出在第三生成方法中使用的(M,m)＝(0,3)的固定权重矩阵mWeight[i][0318]图51是示出在第三生成方法中使用的(M,m)＝(0,4)的固定权重矩阵mWeight[i][0319]图52是示出在第三生成方法中使用的(M,m)＝(0,5)的固定权重矩阵mWeight[i][0320]图53是示出在第三生成方法中使用的(M,m)＝(0,6)的固定权重矩阵mWeight[i][0321]图54是示出在第三生成方法中使用的(M,m)＝(0,7)的固定权重矩阵mWeight[i][0322]图55是示出在第三生成方法中使用的(M,m)＝(0,8)的固定权重矩阵mWeight[i][0323]图56是示出在第三生成方法中使用的(M,m)＝(0,9)的固定权重矩阵mWeight[i][0324]图57是示出在第三生成方法中使用的(M,m)＝(0,10)的固定权重矩阵mWe[0325]图58是示出在第三生成方法中使用的(M,m)＝(0,11)的固定权重矩阵mWe[0326]图59是示出在第三生成方法中使用的(M,m)＝(0,12)的固定权重矩阵mWe[0327]图60是示出在第三生成方法中使用的(M,m)＝(0,13)的固定权重矩阵mWe[0328]图61是示出在第三生成方法中使用的(M,m)＝(0,14)的固定权重矩阵mWe[0329]图62是示出在第三生成方法中使用的(M,m)＝(0,15)的固定权重矩阵mWe[0330]图63是示出在第三生成方法中使用的(M,m)＝(0,16)的固定权重矩阵mWe[0331]图64是示出在第三生成方法中使用的(M,m)＝(0,17)的固定权重矩阵mWe[0333]图66是示出在第三生成方法中使用的(M,m)＝(1,0)的固定权重矩阵mWeight[i][0334]图67是示出在第三生成方法中使用的(M,m)＝(1,1)的固定权重矩阵mWeight[i][0335]图68是示出在第三生成方法中使用的(M,m)＝(1,2)的固定权重矩阵mWeight[i][0336]图69是示出在第三生成方法中使用的(M,m)＝(1,3)的固定权重矩阵mWeight[i][0337]图70是示出在第三生成方法中使用的(M,m)＝(1,4)的固定权重矩阵mWeight[i][0338]图71是示出在第三生成方法中使用的(M,m)＝(1,5)的固定权重矩阵mWeight[i][0339]图72是示出在第三生成方法中使用的(M,m)＝(1,6)的固定权重矩阵mWeight[i][0340]图73是示出在第三生成方法中使用的(M,m)＝(1,7)的固定权重矩阵mWeight[i][0341]图74是示出在第三生成方法中使用的(M,m)＝(1,8)的固定权重矩阵mWeight[i][0342]图75是示出在第三生成方法中使用的(M,m)＝(1,9)的固定权重矩阵mWeight[i][0344]图77是示出在第三生成方法中使用的(M,m)＝(2,0)的固定权重矩阵mWeight[i][0345]图78是示出在第三生成方法中使用的(M,m)＝(2,1)的固定权重矩阵mWeight[i][0346]图79是示出在第三生成方法中使用的(M,m)＝(2,2)的固定权重矩阵mWeight[i][0347]图80是示出在第三生成方法中使用的(M,m)＝(2,3)的固定权重矩阵mWeight[i][0348]图81是示出在第三生成方法中使用的(M,m)＝(2,4)的固定权重矩阵mWeight[i][0349]图82是示出在第三生成方法中使用的(M,m)＝(2,5)的固定权重矩阵mWeight[i][0352]在第四生成方法中，根据由MipSizeId指示的权重矩阵mWeight[i][j]的矩阵大将移位量sW设置为固定值之后获得的固定预测像素predMip[x][y]是近似标准预测像素[0354]图85是示出在第四生成方法中使用的(M,m)＝(0,0)的固定权重矩阵mWeight[i][0355]图86是示出在第四生成方法中使用的(M,m)＝(0,1)的固定权重矩阵mWeight[i][0356]图87是示出在第四生成方法中使用的(M,m)＝(0,2)的固定权重矩阵mWeight[i][0357]图88是例示在第四生成方法中使用的(M,m)＝(0,3)的固定权重矩阵mWeight[i][0358]图89是示出在第四生成方法中使用的(M,m)＝(0,4)的固定权重矩阵mWeight[i][0359]图90是示出在第四生成方法中使用的(M,m)＝(0,5)的固定权重矩阵mWeight[i][0360]图91是示出在第四生成方法中使用的(M,m)＝(0,6)的固定权重矩阵mWeight[i][0361]图92是示出在第四生成方法中使用的(M,m)＝(0,7)的固定权重矩阵mWeight[i][0362]图93是示出在第四生成方法中使用的(M,m)＝(0,8)的固定权重矩阵mWeight[i][0363]图94是示出在第四生成方法中使用的(M,m)＝(0,9)的固定权重矩阵mWeight[i][0364]图95是示出在第四生成方法中使用的(M,m)＝(0,10)的固定权重矩阵mWe[0365]图96是示出在第四生成方法中使用的(M,m)＝(0,11)的固定权重矩阵mWe[0366]图97是示出在第四生成方法中使用的(M,m)＝(0,12)的固定权重矩阵mWe[0367]图98是示出在第四生成方法中使用的(M,m)＝(0,13)的固定权重矩阵mWe[0368]图99是示出在第四生成方法中使用的(M,m)＝(0,14)的固定权重矩阵mWe[0369]图100是示出在第四生成方法中使用的(M,m)＝(0,15)的固定权重矩阵mWeight[0370]图101是示出在第四生成方法中使用的(M,m)＝(0,16)的固定权重矩阵mWeight[0371]图102是示出在第四生成方法中使用的(M,m)＝(0,17)的固定权重矩阵mWeight[0373]图104是示出在第四生成方法中使用的(M,m)＝(1,0)的固定权重矩阵mWe[0374]图105是示出在第四生成方法中使用的(M,m)＝(1,1)的固定权重矩阵mWe[0375]图106是示出在第四生成方法中使用的(M,m)＝(1,2)的固定权重矩阵mWe[0376]图107是示出在第四生成方法中使用的(M,m)＝(1,3)的固定权重矩阵mWe[0377]图108是示出在第四生成方法中使用的(M,m)＝(1,4)的固定权重矩阵mWe[0378]图109是示出在第四生成方法中使用的(M,m)＝(1,5)的固定权重矩阵mWe[0379]图110是示出在第四生成方法中使用的(M,m)＝(1,6)的固定权重矩阵mWe[0380]图111是示出在第四生成方法中使用的(M,m)＝(1,7)的固定权重矩阵mWe[0381]图112是示出在第四生成方法中使用的(M,m)＝(1,8)的固定权重矩阵mWe[0382]图113是示出在第四生成方法中使用的(M,m)＝(1,9)的固定权重矩阵mWe[0384]图115是示出在第四生成方法中使用的(M,m)＝(2,0)的固定权重矩阵mWe[0385]图116是示出在第四生成方法中使用的(M,m)＝(2,1)的固定权重矩阵mWe[0386]图117是示出在第四生成方法中使用的(M,m)＝(2,2)的固定权重矩阵mWe[0387]图118是示出在第四生成方法中使用的(M,m)＝(2,3)的固定权重矩阵mWe[0388]图119是示出在第四生成方法中使用的(M,m)＝(2,4)的固定权重矩阵mWe[0389]图120是示出在第四生成方法中使用的(M,m)＝(2,5)的固定权重矩阵mWe[0393]图像处理系统10具有作为编码器11的图像处理装置和作为解码器51的图像处理[0395]解码器51对提供给其的编码比特流进行解码，并且输出通过解码获得的解码图适应偏移滤波器41和自适应环路滤波器(A[0400]A/D转换单元21将模拟信号的原始图像(编码目标)A/D转换为数字信号的原始图数字信号的原始图像被提供给编码器11时，可以在不提供A/D转换单元21的情况下配置编[0401]重排缓冲器22根据图片组(GOP)将原始图像的帧从显示顺序重新排列为编码(解[0402]计算单元23从来自重排缓冲器22的原始图像中减去经由预测图像选择单元36从[0403]正交变换单元24对从计算单元23提供的残差执行诸如离散余弦变换或Karhunen-[0405]可逆编码单元26通过预定的可逆编码方法对作为来自量化单元25的编码数据的[0408]预测模式可以从帧内预测单元34或运动预测/补偿单元35获得。运动信息可以从[0409]可逆编码单元26通过例如可变长度编码或算术编码(诸如上下文自适应可变长度编码(CAVLC)或上下文自适应二进制算术编码(CABAC))或其他可逆编码方法对编码信息进[0412]编码数据——在量化单元25中被量化的正交变换系数——不仅被提供给可逆编[0413]逆正交变换单元29通过与正交变换单元24的正交变换处理对应的方法对从逆量[0414]计算单元30将经由预测图像选择单元36从帧内预测单元34或运动预测/补偿单元[0416]帧存储器32临时存储从计算单元30提供的解码图像和从ALF42提供的并且应用储的解码图像作为用于在所需定时生成预测图像的参考图像被提供给选34中执行帧内预测时，选择单元33将从帧存储器32提供的参考图像提供给帧内预测单元[0418]帧内预测单元34使用从重排缓冲器22提供的原始图像和经由选择单元33从帧存[0419]运动预测/补偿单元35使用从重排缓冲器22提供的原始图像和经由选择单元33从[0420]运动预测/补偿单元35基于预定的成本函数从多个帧间预测的预测模式中选择最[0421]另外，运动预测/补偿单元35将基于成本函数或运动信息选择的最佳帧间预测的[0422]预测图像选择单元36从帧内预测单元34和运动预测/补偿单元35选择要提供给计[0423]速率控制单元37基于累积在累积缓冲器27中的编码比特流的代码量来控制量化[0424]去块滤波器31a根据需要对来自计算单元30的解码图像应用去块滤波器，并且将应用了去块滤波器的解码图像(滤波图像)或没有应用去块滤波器的解码图像提供给自适[0425]自适应偏移滤波器41根据需要对来自去块滤波器31a的解码图像应用自适应偏移[0426]ALF42根据需要将ALF应用于来自自适应偏移滤波器41的解码图像，并且将应用[0429]图124中所示的编码处理的每个步骤的顺序是为了便于说明的顺序，并且以必要[0433]在帧内预测单元34的帧内预测和运动预测/补偿单元35的帧间预测中，计算各种34生成的预测图像和由运动预测/补偿单元35生成的预测图像中选择并输出最佳预测模式[0435]在步骤S16中，计算单元23计算作为由重排缓冲器22输出的原始图像的要编码的[0439]在步骤S21中，计算单元30将来自逆正交变换单元29的残差与由预测图像选择单[0440]在步骤S22中，去块滤波器31a将去块滤波器应用于来自计[0441]在步骤S23中，自适应偏移滤波器41将自适应偏移滤波器应用于来自去块滤波器[0443]在步骤S25中，帧存储器32存储从ALF42提供的滤波图像，然后处理进行到步骤[0444]在步骤S26中，可逆编码单元26对作为来自量化单元25的量化系数的编码数据进[0447]在步骤S28中，速率控制单元37基于累积在累积缓冲器27中的编码比特流的代码[0452]可逆解码单元62从累积缓冲器61接收编码比特流，并且通过与图123中的可逆编码单元26的编码方法对应的方法对接收的编码比特[0455]逆量化单元63通过与图123中的量化单元25的量化方法对应的方法，对来自可逆[0456]逆正交变换单元64通过与图123中的正交变换单元24的正交变换方法对应的方法[0458]计算单元65将来自逆正交变换单元64的残差和来自选择单[0461]D/A转换单元68对从重排缓冲器67提供的解码图像进行D/A转换，并且将D/A转换基于诸如帧内预测单元71或运动预测/补偿单元72的外部请求将解码图像提供给选择单元[0464]帧内预测单元71根据包括在从可逆解码单元62提供的经使用从帧存储器69经由选择单元70提供的参考图像，执行与图123的帧内预测单元34类似[0465]与图123的运动预测/补偿单元35类似，运动预测/补偿单元72根据包括在从可逆[0467]选择单元73选择从帧内预测单元71提供的预测图像或从运动预测/补偿单元72提[0468]去块滤波器31b根据包括在从可逆解码单元62提供的编码信息中的滤波器参数，对来自计算单元65的解码图像应用去块滤波器。去块滤波器31b将应用了去块滤波器的解码图像(滤波图像)或者没有应用去块滤波器的解码图像提供给自适应偏[0469]自适应偏移滤波器81根据包括在从可逆解码单元62提供的编码信息中的滤波器器81将应用了自适应偏移滤波器的解码图像(滤波图像)或没有应用自适应偏移滤波器的[0470]ALF82根据需要对来自自适应偏移滤波器81的解码图像应用ALF，并且将应用了ALF的解码图像或没有应用ALF的解码图像提供给重排缓冲器67和帧存储器且将作为包括在编码比特流的解码结果中的编码数据的量化系数提供给逆量72根据经由选择单元70从帧存储器69提供的参考图像和从可逆解码单元62提供的编码信预测单元71或运动预测/补偿单元72将通过帧内预测或帧间预测获得的预测图像提供给选[0479]在步骤S56中，逆正交变换单元64对来自逆量化单元63的正交变换系数进行逆正[0480]在步骤S57中，计算单元65通过将来自逆正交变换单元64的残差与来自选择单元块滤波器的结果而获得的滤波图像提供给自适应偏移滤波器81，然后处理从步骤S58进行[0482]在步骤S59中，自适应偏移滤波器81根据从可逆解码单元62提供的编码信息中包[0483]ALF82对来自自适应偏移滤波器81的滤波图像应用ALF，并且将所得的滤波图像该处理结束解码处理。输出D/A转换后的滤波图像(解码图像)并将其显示在显示器(未示[0487]由图123的帧内预测单元34和图125的帧内预测单元71执行的帧内预测包括MIP。在帧内预测单元34和71中，通过第二生成方法至第四生成方法中的任何一种来执行MIP的[0489]本技术可以应用于任何图像编码/解码方法。也就是说，只要不与上述本技术矛[0491]其中设置了上述各种信息的数据单元和各种类型的处理所针对的数据单元都是[0497]本技术可以被实现为构成装置或系统的任何配置，例如，作为系统大规模集成[0500]图127是示出其上安装了用于执行上述一系列处理中的一些或全部的程序的计算[0504]计算机具有内置的中央处理单元(CPU)902，并且输入/输出接口910经由总线901置以及其中多个模块容纳在一个外壳中的一个