CN114913249B 编码、解码方法和相关设备 （华为技术有限公司）

涉及基于人工智能的视频或图像压缩技术领域解码端对第一码流进行解码可以得到原始图像示原始图像的至少部分区域与重建图像的至少2述保真度图用于表示所述原始图像的至少部分区域与重建图像的至少部分区域之间的失将所述原始图像划分为多个第一图像块，以及将所述重建图像划分为多个第二图像或将所述原始图像的预设区域划分为多个第一图像块，建图像的预设区域的划分策略相同，所述多个第一图像块与所述多个第二图像块一一对根据所述多个第二图像块中的任一第二图像块与所述任一第二图像块对应的第一图任一第一元素在所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所第一元素对应的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预设区域5.根据权利要求3或4所述的方法，其特征在于对所述任一第一元素进行熵编码以得到所述第二码流，对所述任一第根据所述已编码的第一元素中的至少一个第一元素的值确定所述任一第一元素的值36.根据权利要求3或4所述的方法，其特征在于，所述对第二码流进行解码以得到保真度图的重建图，其中，所述第二码流所述保真度图包括多个第二图像块中的任一第二图像块的保真度值，像块的保真度值用于表示所述任一第二图像块与所述任一第二图像块对应的原始图像块任一第一元素在所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所第一元素对应的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预设区域根据所述任一第一元素的重建保真度值得到所述保真度4对所述量化后的第一元素的重建保真度值进行反量化，以得到所述根据所述任一第一元素的重建保真度值得到所述保真度将所述原始图像划分为多个第一图像块，以及将所述重建图像划分为多个第二图像或将所述原始图像的预设区域划分为多个第一图像块，建图像的预设区域的划分策略相同，所述多个第一图像块与所述多个第二图像块一一对根据所述多个第二图像块中的任一第二图像块与所述任一第二图像块对应的第一图度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的位置根据与所述任一第一元素对应的第二图像16.根据权利要求14所述的编码设备，其特征在于，所述第二图像块包括三个色彩分彩分量A下的二维阵列包括多个第一元素，所述多个第一元素中的任一第一元素的值为与所述任一第一元素对应的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预5对所述任一第一元素进行熵编码以得到所述第二码流，对所述任一第根据所述已编码的第一元素中的至少一个第一元素的值确定所述任一第一元素的值至少部分区域与所述重建图像的至少部分区所述保真度图包括多个第二图像块中的任一第二图像块的保真度值，像块的保真度值用于表示所述任一第二图像块与所述任一第二图像块对应的原始图像块度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的位置根据与所述任一第一元素对应的第二图像22.根据权利要求20所述的解码设备，其特征在于，所述第二图像块包括三个色彩分彩分量A下的二维阵列包括多个第一元素，所述多个第一元素中的任一第一元素的值为与所述任一第一元素对应的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预6根据所述任一第一元素的重建保真度值得到所述保真度对所述量化后的第一元素的重建保真度值进行反量化，以得到所述根据所述任一第一元素的重建保真度值得到所述保真度非瞬时性计算机可读存储介质，耦合到所述处理器并存储由所述处理器执行的程序，非瞬时性计算机可读存储介质，耦合到所述处理器并存储由所述处理器执行的程序，30.一种非瞬时性存储介质，其特征在于，7[0006]上述和其它目标通过独立权利要求的主体实现。其它实现方式在从属权利要求、述保真度图用于表示所述原始图像的至少部分区域与重建图像的至少部分区域之间的失8所述多个第二图像块中的任一第二图像块与所述任一第二图像块对应的第一图像块计算得到所述任一第二图像块的保真度值，所述保真度图包括所述任一第二图像块的保真度建图像中的位置与所述任一第二图像块对应的第一图像块在所述原始图像中的位置相同；所述原始图像的预设区域在所述原始图像中的位置与所述重建图像的预设区域在所述重域中的位置与所述任一第二图像块对应的第一图像块在所述原始图像的预设区域中的位二图像块；划分得到的多个第一图像块和划分得到的第二图像块是存在一一对应的关系二图像块的尺寸也相同；故可以将第一图像块和第二图像块作为保真度计算的基本单元，也即根据这多个第二图像块中的任一第二图像块与其对应的第一图像块可以计算得到任所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预9的任一第一元素在保真度图中的位置与其对应的第二图像块在重建图像或在重建图像的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预设区域中的位置确定。下的二维阵列包括多个行第一元素，宽表示任一色彩分量A下的二维阵列包括多个列第一元素，多个第一元素的数量等于宽和高的乘积，色彩分量A为所述三个色彩分量的任意一保真度图，三维阵列的保真度图中的任一色彩分量A下的二维阵列中的第一元素表征的是有利于三维阵列的保真度图可以表征编码图像的三个色彩分量一元素中的至少一个第一元素的值确定所述任一第一元素的值的概率分布或所述任一第所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位一元素的值的重建。所述任一第一元素的重建保真度值在所述保真度图的重建图中的位参数信息包括所述重建图像的多个第二图像块中的全部或部分第二图像块的量化参数值；参数图用于表示所述原始图像的至少部分区域与所述重建图像的至少部分区域之间的失端在对原始图像编码得到的第一码流进行解码操作，不会得到重建图像的各个区域(第二多个第二图像块中的全部或部分第二图像块的量化参数值可以构建重建图像的量化参数量化参数图中的位置根据与所述任一第二元素对应的第二图像块在所述重建图像中的位一色彩分量A下的二维阵列包括多个第二元素，所述多个第二元素中的任一第二元素的值为与所述任一第二元素对应的第二图像块的色彩分量A的量化参数值，所述任一第二元素在所述重建图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第二元素对应图像的保真度；当目标量化参数信息包括多个编码单元中的部分编码单元的量化参数值到用于表征重建图像的保真度或用于表征重建图像的预设区域的保真度的重建图像的量编码单元中的至少一个编码单元的量化参数值确定这多个编码单元中除该部分编码单元化参数图时，得到的重建图像的量化参数图也可以用于表征重建图像的预设区域的保真述任一第二图像块与所述任一第二图像块对应的第一图像块之所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位熵编码以得到所述第二码流，对所述任一第一元素的熵编码独立于其他第一元素的熵编像的至少部分区域与所述重建图像的至少部分区域之所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位原始图像的至少部分区域与所述重建图像的至少部分区域之量化参数图中的位置根据与所述任一第二元素对应的第二图像块在所述重建图像中的位元素对应的第二图像块在所述重建图像的预设区域中的一色彩分量A下的二维阵列包括多个第二元素，所述多个第二元素中的任一第二元素的值为与所述任一第二元素对应的第二图像块的色彩分量A的量化参数值，所述任一第二元素在所述重建图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第二元素对应元素在所述参考量化参数图中的位置根据所述任一目标编码单元在所述重建图像中的位划分所述重建图像的划分策略相同，所述多个第一图像块与所述多个第二图像块一一对建图像的预设区域的划分策略相同，所述多个第一图像块与所述多个第二图像块一一对所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位根据所述已编码的第一元素中的至少一个第一元素的值确定所述任一第一元素的值的概重建图用于表示所述原始图像的至少部分区域与所述重建图像的至少部分区域之间的失所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位量化参数信息包括所述重建图像的多个第二图像块中的全部或部分第二图像块的量化参量化参数图用于表示所述原始图像的至少部分区域与所述重建图像的至少部分区域之间量化参数图中的位置根据与所述任一第二元素对应的第二图像块在所述重建图像中的位元素对应的第二图像块在所述重建图像的预设区域中的一色彩分量A下的二维阵列包括多个第二元素，所述多个第二元素中的任一第二元素的值为与所述任一第二元素对应的第二图像块的色彩分量A的量化参数值，所述任一第二元素在所述重建图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第二元素对应参考量化参数图中的位置根据所述任一目标编码单元在所述重建图像中的位置和所述任面所述的方法的其它特征和实现方式直接取决于本申请第七方面所述的装置的功能性和面所述的方法的其它特征和实现方式直接取决于本申请第八方面所述的装置的功能性和面所述的方法的其它特征和实现方式直接取决于本申请第九方面所述的装置的功能性和[0085]图2为用于实现本申请实施例的视频编码器实例示例的框图，其中该视频编码器[0086]图3为用于实现本申请实施例的视频解码器实例示例的框图，其中该视频解码器原始视频图像以减少表示该视频图像所需的数据量(从而更高效存储和/或传输)。视频解预测与变换域中用于应用量化的2D变换编码结合)。视频序列中的任一图像通常分割成不视频解码器30(或简称为解码器30)代表可用于根据本申请中描述的各种示例执行各技术[0113]图像源16可包括或可以为任意类型的用于捕获现实世界[0116]视频编码器(或编码器)20用于接收预处理图像数据19并提供编码图像数据21(下[0119]目的设备14中的通信接口28用于直接从源设备12或从存储设备等任意其它源设[0120]通信接口22和通信接口28可用于通过源设备12与目的设备14之间的直连通信链[0123]通信接口22和通信接口28均可配置为如图1A中从源设备12指向目的设备14的对[0124]视频解码器(或解码器)30用于接收编码图像数据21并提供解码图像数据(或称解[0125]后处理器32用于对解码后的图像等解码图像数据31(也称为重建后的图像数据)示设备34等显示的解码图像数据31等任何其硅基液晶显示器(liquidcrystalonsilicon，LCoS)、数字光处理器(digitallight[0127]译码系统10还包括训练引擎25，训练引擎25用于训练编码器20(尤其是编码器20中的模式选择单元260)或解码器30(尤其是解码器30中的模式应用单元360)以处理输入图像或图像区域或图像块以生成输入图像或图像区[0128]本申请实施例中用于练编码器20或解码器30的训练数据可以存入数据库(未示编码器20中的环路滤波器220或解码器30中的环路滤波器320可以根据该目标模型对输入设备14或对应功能可以使用相同硬件和/或软件或通过单独的硬件和/或软件或其任意组[0131]根据描述，图1A所示的源设备12和/或目的设备14中的不同单元或功能的存在和[0132]编码器20(例如视频编码器20)或解码器30(例如视频解码器30)或两者都可通过编码数据到存储器和/或从存储器中检索并解码数据的设[0135]图1B是根据一示例性实施例的包含图2的视频编码器20和/或图3的视频解码器30的视频译码系统40的实例的说明图。视频译码系统40可以包含成像设备41、视频编码器以只包含视频编码器20或只包含视频解码些实例中，显示设备45可以用于呈现视频数据。处理电路46可以包含专用集成电路器(staticrandomaccessmemory，SRAM)、动态随机存储器(dynamicrandomaccess图3的视频解码器30和/或本文中所描述的任何其它解码器系统或子系统所论述的各种模实施参照图3和/或本文中所描述的任何其它解码器系统或子系统所论述的[0142]为便于描述，参考通用视频编码(Versatilevideocoding，VVC)参考软件或由ITU-T视频编码专家组(VideoCodingExpertsGroup，VCEG)和ISO/IEC运动图像专家组(MotionPictureExpertsGroup，MPEG)的视频编码联合工作组(JointCollaborationTeamonVideoCoding，JCT-VC)开发的高性能视频编码(High-EfficiencyVideoCoding，HEVC)描述本申请实施例。本领域普通技术人员理解本申请实施例不限于HEVC或[0145]图2为用于实现本申请技术的视频编码器20的示例的示意性框图。在图2的示例码器20也可称为混合型视频编码器或基于混合型视频编解码[0146]参见图2，帧间预测模块/帧内预测模块/环路滤波模块包括(为)经过训练的目标和帧内预测单元254组成编码器的后向信号路径，其中编码器20的后向信号路径对应于解频序列的图像序列中的图像。接收的图像或图像数据也可以是预处理后的图像(或预处理或待编码的图像(尤其是在视频编码中将当前图像与其它图像区分开时，其它图像例如同203在H.265/HEVC和VVC标准中也可以称为根块、宏块(H.264/AVC)或编码树块(Coding[0153]与图像17一样，图像块203同样是或可认为是具有强度值(像素点值)的像素点组[0155]在一个实施例中，图2所示的视频编码器20还可以用于使用片(也称为视频片)分一片可包括一个或多个块(例如，编码树单元CTU)或一个或多个块组(例如H.265/HEVC/[0156]在一个实施例中，图2所示的视频编码器20还可以用于使用片/编码区块组(也称为视频编码区块组)和/或编码区块(也称为视频编码区块)对图像进行分割和/或编码，其码区块组可包括一个或多个块(例如CTU)或一个或多个编码区块等，其中任一编码区块可[0158]残差计算单元204用于通过如下方式根据图像块203和预测块265来计算残差块差值，图像块中像素的原始值与图像块中像素的预测值的差值的集合称为图像块的残差，[0160]变换处理单元206用于对残差块205的像素点值执行离散余弦变换(discrete元212为逆变换(以及在解码器30侧通过例如逆变换处理单元312为对应逆变换)指定具体单元210等执行的对应或逆解量化可包括乘以量化步长。根据例如HEVC一些标准的实施例能由于在用于量化步长和量化参数的等式的定点近似中使用的比例而修改的残差块的范[0166]在一个实施例中，视频编码器20(对应地，量化单元208)可用于输出量化参数[0168]反量化单元210用于对量化系数209执行量化单元208的反量化，得到解量化系数散余弦变换(discretecosinetransform，DCT)或逆离散正弦变换(discretesine270进行熵编码后输出，例如使得解码器30可接收并使用相同或不同的环路滤波器参数进[0177]解码图像缓冲器(decodedpicturebuffer，DPB)230可以是存储参考图像(或参多种存储器设备中的任一种形成，例如动态随机存取存储器(dynamicrandomaccess整的之前重建即解码图像(和对应参考块和像素点)和/或部分重建的当前图像(和对应参一个或多个之前解码图像的滤波和/或未经滤波的重建像素点或重建块。重建图像数据用[0180]模式选择单元260可用于为当前块预测模式(包括不分割)和预测模式(例如帧内择单元260支持的或可用的预测模式中)，所述预测模式提供最佳匹配或者说最小残差(最小残差是指传输或存储中更好的压缩)，或者提供最小信令开销(最小信令开销是指传输或存储中更好的压缩)，或者同时考虑或平衡以上两者。模式选择单元260可用于根据码率失[0182]换言之，分割单元262可用于将视频序列中的图像分割为编码树单元(coding例如，通过迭代使用四叉树(quad-treepartitioning，QT)分割、二叉树(binary-tree且用于例如对块部分或子块中的每一个执行预测，其中模式选择包括选择分割块203的树[0183]下文将详细地描述由视频编码器20执行的分割(例如，由分割单元262执行)和预对应的色度像素点块组成。CTU中亮度块的最大允许大小在正在开发的通用视频编码中在根树级别0(层次级别0、深度0)等的根块可以递归地分割为两个或两个以上下一个较束标准，例如达到最大树深度或最小块大小)。未进一步分割的块也称为树的叶块或叶节两个对应编码块、或单色图像的像素点的编码块或使用三个独立颜色平面和语法结构(用[0188]例如，在实施例中，根据当前正在开发的最新视频编码标准(称为通用视频编码(VVC)，使用嵌套多类型树(例如二叉树和三叉树)的组合四叉树来划分用于现该异常。VVC制定了具有四叉树嵌套多类型树的编码结构中的分割划分信息的唯一信令四叉树叶节点(当足够大可以被)被进一步分割为一个多类型树结构。在多类型树结构中，用第二标识(mtt_split_cu_vertical_flag)指示划分方向，再用第三标识(mtt_split_cu_binary_flag)指示划分是二叉树划分或三叉树划分。根据mtt_split_cu_vertical_[0191]在一个示例中，视频编码器20的模式选择单元260可以用于执行上文描述的分割例如，若干传统角度帧内预测模式自适应地替换为VVC中定义的非正方形块的广角帧内预并且，平面模式的帧内预测结果还可以使用位置决定的帧内预测组合(position[0195]帧内预测单元254用于根据帧内预测模式集合中的帧内预测模式使用同一当前图[0196]帧内预测单元254(或通常为模式选择单元260)还用于输出帧内预测参数(或通常为指示块的选定帧内预测模式的信息)以语法元素266的形式发送到熵编码单元270，以包[0198]在可能的实现中，帧间预测模式集合取决于可用参考图像(即，例如前述存储在均MVP和零MV。可以使用基于双边匹配的解码器侧运动矢量修正(decodersidemotionvectorrefinement，DMVR)来增加合并模式的MV的准确度。带有MVD的合并模式(merge立即发送MMVD标志，以指定CU是否使用MMVD模式。可以使用CU级自适应运动矢量分辨率个控制点(4参数)或3个控制点(6参数)运动矢量的运动信息来描述块的仿射运动场。基于子块的时间运动矢量预测(subblock-basedtemporalmotionvectorprediction，似，但预测的是当前CU内的子CU的运动矢量。双向光流(bi-directionalopticalflow，[0201]帧间预测单元244可包括运动估计(motionestimation，ME)单元和运动补偿为形成视频序列的图像序列的一部分或形成该图像间的偏移(空间偏移)作为帧间预测参数提供给运动估计单元。该偏移也称为运动矢量元可在其中一个参考图像列表中定位运动矢量指向案、二值化算法、上下文自适应二进制算术编码(contextadaptivebinaryarithmeticcoding，CABAC)、基于语法的上下文自适应二进制算术编码(syntax-basedcontext-adaptivebinaryarithmeticcoding，SBAC)、概率区间分割熵(probabilityintervalpartitioningentropy，PIPE)编码或其它熵编码方法或技术)应用于量化残差系数209、272以编码比特流21等形式输出的编码图像数据21，使得视频解码器30等可以接收并使用[0209]图3示出了用于实现本申请技术的示例性视频解码器30。视频解码器30用于接收数据21或比特流包括用于解码所述编码图像数据21的信息，例如表示编码视频片(和/或[0211]参见图3，帧间预测模块/帧内预测模块/环路滤波模块包括(为)经过训练的目标220、解码图像缓冲器230、帧间预测单元344和帧内预测单元354还组成视频编码器20的312在功能上可与逆变换处理单元122相同，重建单元314在功能上可与重建单元214相同，环路滤波器320在功能上可与环路滤波器220相同，解码图像缓冲器330在功能上可与解码器30的相应单元和功能。[0214]熵解码单元304用于解析比特流21(或一般为编码图像数据21)并对编码图像数据解码器30的其它单元提供其它参数。视频解码器30可以接收视频片和/或视频块级的语法[0216]反量化单元310可用于从编码图像数据21(例如通过熵解码单元304解析和/或解系数，并基于所述量化参数对所述解码的量化系数309进行反量化以获得反量化系数311，所述反量化系数311也可以称为变换系数311或解量化系数311。反量化过程可包括使用视系数311应用变换以得到像素域中的重建残差块313。重建残差块313也可称为变换块313。理单元312还可以用于从编码图像数据21(例如通过熵解码单元304解析和/或解码)接收过程也可以应用于内部子块边缘，例如仿射子块边缘、ATMVP子块边缘、子块变换(sub-内预测单元354在功能上可与帧内预测单元254相同，并基于从编码图像数据21(例如通过熵解码单元304解析和/或解码)接收的分割和/或预测参数或相应信息决定划分或分割和执行预测。模式应用单元360可用于根据重建图像、块或相应的像素点(已滤波或未滤波)测单元354用于根据指示的帧内预测模式和来自当前图像的之前解码块的数据生成用于当元360中的帧间预测单元344(例如运动补偿单元)用于根据运动矢量和从熵解码单元304(例如视频片)或作为片的替代，相同或类似的过程可应用于编码区块组(例如视频编码区[0229]模式应用单元360用于通过解析运动矢量和其它语法元素，确定用于当前视频片式应用单元360使用接收到的一些语法元素确定用于编码视频片的视频块的预测模式(例或作为片的替代，相同或类似的过程可应用于编码区块组(例如视频编码区块组)和/或编[0230]在一个实施例中，图3所示的视频编码器30还可以用于使用片(也称为视频片)分一片可包括一个或多个块(例如CTU)或一个或多个块组(例如H.265/HEVC/VVC标准中的编[0231]在一个实施例中，图3所示的视频解码器30还可以用于使用片/编码区块组(也称为视频编码区块组)和/或编码区块(也称为视频编码区块)对图像进行分割和/或解码，其码区块组可包括一个或多个块(例如CTU)或一个或多个编码区块等，其中任一编码区块可在某些块或帧没有逆变换处理单元312的情况下直接反量化残差信号。在另一种实现方式矢量推导或环路滤波的处理结果进行进一步的运算，例如裁剪(clip)或移位(shift)运[0234]应该注意的是，可以对当前块的推导运动矢量(包括但不限于仿射模式的控制点果bitDepth设置为16，则范围为-32768～32767；如果bitDepth设置为18，则范围为-[0237]图4为本申请实施例提供的视频译码设备400的示意图。视频译码设备400适用于[0238]视频译码设备400包括：用于接收数据的入端口410(或输入端口410)和接收单元(receiverunit，Rx)420；用于处理数据的处理器、逻辑单元或中央处理器(central[0240]存储器460包括一个或多个磁盘、磁带机和固态硬盘，可以用作溢出数据存储设addressablememory，TCAM)和/或静态随机存取存储器(staticrandom-accessmemory，[0241]图5为示例性实施例提供的装置500的简化框图，装置500可用作图1A中的源设备的处理器502等单个处理器来实施已公开的实现方式，但使用一个以上的处理器速度更快[0243]在一种实现方式中，装置500中的存储器504可以是只读存储器(ROM)设备或随机可以包括处理器502通过总线512访问的代码和数据506。存储器504还可包括操作系统508和应用程序510，应用程序510包括允许处理器502执行本文所述方法的至少一个程序。例[0245]虽然装置500中的总线512在本文中描述为单个总线，但是总线512可以包括多个YUV或RGB三个色彩分量强度值的重建，还包含该图像的所有编码单元的块划分、编码模近年来，ITU-T和ISO/IEC两大标准组织在2003年、2013年和2020年先后联合制定并发布AV1视频编解码方案。上述视频编解码技术均采用了基于块划分与变换量化的混合型编解x、cx分别表示输入图像的宽、高、色彩分量数。分析器与合成器通常为深度卷积神经网络[0258]图2中的量化单元208用于通过应用标量量化或矢量量化来对变换处理单元206输接输出或由熵编码单元270或任何其它熵编码单元熵编码后输出，使得解码器30可以接收0123的，该CU的QP差分信息包含QP差分绝对值cu_qp_delta_abs和CU差分符号cu_qp_delta_sign_flag，如表4所示；其中，该CU的QP差分值即为cu_qp_delta_abs×(1-2×cu_qp_根据左相邻QG与上相邻QG以及前一个编码QG的QP值来推导得到一个CU的QP预测值，也即[0276]使用指定量化步长Qstep对指定信号做量化操作，可以理论分析获得量化失真的[0278]第一，如果一个图像块的残差块中任一采样点的残差的值的张度小于量化步长[0279]第二，如果一个图像块的残差量化为全0，即不会为该图像块传输任何残差的情解码方案中，待编码图像经编码器(Encoder)子网络获得输入图像的潜层表达，再经量化的模型做视频或图像的编解码操作，这类方法通常都会针对人眼感知做主观视觉质量优[0288]图7是示出根据本申请一种实施例的编码方法的过程700的流程图。过程700可由解的是，过程700可以以各种顺序执行和/或同时发生，不限于图7所示的执行顺序。过程像的预设区域和重建图像的预设区域计算得到，需要将该预设区域在原始图像中的位置的左上角亮度像素坐标；且该预设区域在原始图像中的位置和/或该预设区域在重建图像区域在原始图像中的位置和/或该预设区域在重建图像中的位置也可以不和第一码流、第所述多个第二图像块中的任一第二图像块与所述任一第二图像块对应的第一图像块计算得到所述任一第二图像块的保真度值，所述保真度图包括所述任一第二图像块的保真度述多个第二图像块中的任一第二图像块在所述重建图像的预设区域中的位置与所述任一第二图像块对应的第一图像块在所述原始图像的预设区域中的得到的多个第一图像块中的任一第一图像块在原始图像中的位置与其对应的第二图像块与H表示原始图像或重建图像的宽和高，W与H表示原始图像的预设区域或重建图像的预设得到R×S个第二图像块的保真度值；再根据这R×S个第二图像块的保真度值即可得到保图中的任一元素的值表征重建图像中哪个图像块的保真度。当M和N的值或R和S的值为解所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预述多个第一元素中的任一第一元素在所述保真度图中的位置根据与其对应的第二图像块的位置根据与其对应的第二图像块在所述重建图像的预设区域中素与重建图像或重建图像的预设区域中第i行第j列的第二图像块对应，保真度图中第i行第j列的第一元素的值为重建图像或重建图像的预设区域中第i行第j列的第二图像块的保的任一第一元素在保真度图中的位置与其对应的第二图像块在重建图像或在重建图像的第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预设区域中的位置确定。下的二维阵列包括多个行第一元素，宽表示任一色彩分量A下的二维阵列包括多个列第一元素，多个第一元素的数量等于宽和高的乘积，色彩分量A为所述三个色彩分量的任意一列的保真度图，三维阵列的保真度图中的任一色彩分量A下的二维阵列中的第一元素表征因此有利于三维阵列的保真度图可以表征编码图像的三个色彩定该第一元素的预测值，也即利用已编码的保真度值来确定当前编码的保真度的预测值，素的值来确定当前编码的第一元素的值的概率分布或所述当前编码的第一元素的预测值，然后根据当前编码的第一元素的值的概率分布或所述当前编码的第一元素的预测值对当述了一种上下文建模方法来辅助算数编码)、二进制算数编码等；本申请对此不作具体限图像的预设区域的保真度，保真度图的重建图也用于表征重建图像的预设区域的保真度。区域在原始图像中的位置和/或该预设区域在重建图像中的位置，以便解码端在解码得到像的预设区域的划分策略与划分所述重建图像的预设区所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预设区域中多个第一元素的重建保真度值中的任一第一元素的重建保真度值为与其对应的第二图像这R×S个第一元素中的任一第一元素在保真度图的重建图中的位置与其对应的第二图像第i行第j列的第一元素的重建保真度值为重建图像或重建图像的预设区域中第i行第j列度图的重建图可以用于表示原始图像的至少部分区域与重建图像的至少部分区域之间的域的图像质量；或者根据保真度图的重建图确定重建图像或重建图像的预设区域的保真的后处理增强算法中，根据图像失真程度划分为B个失真范围分别进行训练得到多个图像所描述的步骤或操作可以参阅图7所描述的步骤或操作[0351]下面通过视频图像编解码全过程来对图7至图12提供的技术方案进行进一步的介习技术的编解码方案，例如基于生成对抗网络(Generativeadversarialnetwork，GAN)张编码图像中基本单元的数量，例如指定编码图像水平方向与竖直方向的基本单元的数量。因为采用均匀划分的方式将一张编码图像划分为一组基本单元(也即多个基本单元)，[0359]在计算保真度时，可以采用均方误差(MeanSquaredError，MSE)、绝对误差和(SumofAbsoluteDifference，SAD)、结构相似性(structuralsimilarityindex像块；计算多个第二图像块中的任一第二图像块相对于与其对应的第一图像块的保真度，化步长进行量化；甚至为一个视频序列的每张编码图像的不同图像块设置不同的量化步像的保真度图进行量化时采用哪个量化步长或哪个编码块的保真度值进行量化时采用哪height分别为计算保真度时采用的基本单元的宽和高；quantization_step为量化步长；fidelity_value为在一个基本单元计算得到[0366]如表5所示，在对保真度图编码时，可遍历当前编码图像的保真度图中的每一个前编码的保真度值的概率分布或当前编码的保真度值的预测值来选择不同的哈夫曼码表，[0369]通过上述编码操作，编码端可以得到原始图像的第一码流和保真度图的第二码[0372]解码端接收到来自编码端的压缩码流后，从压缩码流中获取原始图像的第一码[0374]解码端接收到来自编码端的压缩码流后，从压缩码流中获取保真度图的第二码度图，那么解码端解码操作得到的保真度图的重建图与编码端计算得到的保真度图不同，因为解码端解码操作得到的保真度图的重建图将包含编码端对保真度图编码操作引入的[0376]解码端根据保真度图的重建图来判断一张重建图像或重建图像内预设区域的信述目标量化参数信息包括所述重建图像的多个第二图像块中的全部或部分第二图像块的图像划分为多个编码单元(也即编码块)，并对这多个编码单元中的任一编码单元进行编建图像的量化参数图用于表示所述原始图像的至少部分区域与所述重建图像的至少部分的任一第二元素有两个属性，分别为量化参数值与该量化参数值在量化参数图中的位置。应理解，量化参数图中的每一个量化参数值表示对应重建图像中的某个图像块的失真程单元作为用于构建量化参数图的基本单元，此时重建图像中的编码单元也即第二图像块，编码单元与这6个第二元素一一对应，任一格子内的数字为与其对应的编码单元对应的量量化参数图中的任一第二元素在该量化参数图中的位置与其对应的基本单元在原始图像量化参数图是的尺寸是按照原始图像或重建图像的元中的全部编码单元的量化参数值时，重建图像的量化参数图是整张重建图像的保真度的量化参数图可以用于表示所述原始图像的至少部分区域与所述重建图像的至少部分区量化参数图中的位置根据与所述任一第二元素对应的第二图像块在所述重建图像中的位一色彩分量A下的二维阵列包括多个第二元素，所述多个第二元素中的任一第二元素的值为与所述任一第二元素对应的第二图像块的色彩分量A的量化参数值，所述任一第二元素在所述重建图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第图像的量化参数图中的任一色彩分量A下的二维阵列的位置根据与所述任一第二元素对应图像也即编码图像(codingpicture)的参考图像(referencepicture)。当前主流视频图[0398]本申请实施例提供的构建量化参数图的方案可以与任一现有主流视频图像编解前原始图像中的编码单元的量化参数值修正当前原始图像中其他编码单元的量化参数值，或者使用当前原始图像的参考图像的量化参数图(后面简称为参考量化参数图)对不准确根据全部编码单元的量化参数值构建重建图像的编码单元的量化参数值构建重建图像的量化量化参数图得到多个编码单元中除该部分编码单元之外的任意一个编码单元的量化参数图像的量化参数图可以用于表征整张重建图像的保真度或用于表征重建图像的预设区域或用于表征重建图像的预设区域的保真度的元的量化参数值；进而可以根据全部编码单元的量化参数值构建重建图像的量化参数图；建图像的预设区域中的编码单元的量化参数值构建重建图像的量[0406]在本申请实施例中，解码端无法从第一码流中获得某个编码单元的量化参数值少一个编码单元的量化参数值确定这多个编码单元中除该部分编码单元之外的任意一个图像的量化参数图也可以用于表征重建图像的预设区值的编码单元进行量化参数值填充，得到多个编码单元中的全部编码单元的量化参数值；中的编码单元的量化参数值构建重建图像的量化重建图像的量化参数图也可以用于表征重建图像的预设区域的[0419]在任一主流视频编解码方案的解码器中都包含一个解码图像缓存器来存储已解的后处理增强算法中，根据图像失真程度划分为B个失真范围分别进行训练得到多个图像述任一第二图像块与所述任一第二图像块对应的第一图像块之所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位熵编码以得到所述第二码流，对所述任一第一元素的熵编码独立于其他第一元素的熵编[0434]需要说明的是，各个单元的实现还可以对应参照图7所示的方法实施例的相应描的至少部分区域之间的失真；解码端对第一码流进行解码可以得到原始图像的重建图像，像的至少部分区域与所述重建图像的至少部所述保真度图中的位置根据与所述任一第一元素对应的第二图像块在所述重建图像的预第二图像块的色彩分量A的保真度值，所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位置根据与所述任一第一元素对应的第二图像块在所述重建图像中的位置确定，或所述任一第一元素在所述保真度图中的任一色彩分量A下的二维阵列的位[0446]在图17所描述的解码设备中，对第一码流进行解码可以得到原始图像的重建图故保真度图的重建图可以用于表示原始图像的至少部分区域与重建图像的至少部分区域量化参数图中的位置根据与所述任一第二元素对应的第二图像块在所述重建图像中的位元素对应的第二图像块在所述重建图像的预设区域中的一色彩分量A下的二维阵列包括多个第二元素，所述多个第二元素中的任一第二元素的值为