CN114511479B 图像增强方法和装置 （阿里巴巴（中国）有限公司）

WO2019112085A1,2019.06.13以在第一色域例如BT709和/或第一亮度动态范态范围的图像进行图像增强处理，得到第一图像。将具有第一色域和/或第一亮度动态范围的第一图像转换为具有第二色域例如BT2020和/或第二亮度动态范围例如HDR的第二图像，并在第二色域和/或第二亮度动态范围内进行图像增强再将第二图像转换为具有第一色域和/或第一亮2将具有第一色域和/或第一亮度动态范围的第一图像转换为具有第二色域和/或第二将第二图像转换为具有第一色域和/或第一亮度动态在第一色域和/或第一亮度动态范围内，对具有第一色域和/或3.根据权利要求2所述的方法，其中，所述基于局部亮度直方图和/或全局亮度直方图，在所述图像的RGB基于所述亮度分布信息，使用分别对应于所述多个亮度值范围和/或图像全局的多个4.根据权利要求3所述的方法，其中，所述对具有第一色对所述图像进行基于皮肤颜色保护目的的色彩饱和度基于所述皮肤颜色相似度，确定所述图像的至少一个区域的色彩为皮肤基于所述皮肤颜色概率，对所述图像的所述至少一个区域进行色6.根据权利要求1所述的方法，其中，所述将具使用第一亮度动态范围对应的电光转换函数，将第一图像的非将第二色域图像的亮度动态范围转换到第二亮度动态范围，得到第使用第二亮度动态范围对应的光电转换函数，将色彩增强3将亮度融合后的图像从YUV颜色空间转换回到第二色域，得到所述第二亮度动态范围将所述内容部分从YUV颜色空间转换到Y在Yxy颜色空间中，利用基于人眼对内容的感知特性的亮度映射将第二亮度动态范围的内容部分从Yxy颜色空间转回到Y9.根据权利要求1所述的方法，其中，所述将第二图像在亮度线性空间中，采用两条hable曲线加权的方式，对第二图像进行非线性反向映融合非线性反向映射的结果和线性反向映射的结果，得到第一使用第一亮度动态范围对应的光电转换函数，将第一色域图像转将具有标准色域和/或标准亮度动态范围的第一视频转换为具有广色域和/或高亮度将第二视频转换为具有标准色域和/或标准亮度动态范第一增强装置，在第一色域和/或第一亮度动态范围内，对具度动态范围的图像进行图像增强处理，得到具有第一色域和/或第一亮度动态范围的第一第二增强装置，用于将所述第一图像转换为具有第二色域和/或第二亮度动态范围的4反向映射装置，用于将第二图像转换为具有第一色域和/或第一亮度动态范围的第三5[0002]随着图像拍摄设备和图像显示设备的飞速发展，以及网络带宽成几何级数的提[0006]因此，设计一种针对标准色域的SDR图像的增强方案，以满足用户对高画质的需[0009]亮度与对比度的调整方案通常包括：在全局或局部基于直方或第一亮度动态范围的第一图像转换为具有第二色域和/或第二亮度动态范围的第二图6并且/或者第二亮度动态范围的上限比第一亮度动态范围的上限高；以及将第二图像转换[0016]可选地，对具有第一色域和/或第一亮度动态范围的图像进行图像增强处理的步[0017]可选地，对具有第一色域和/或第一亮度动态范围的图像进行图像增强处理的步[0019]可选地，将具有第一色域和/或第一亮度动态范围的第一图像转换为具有第二色[0020]可选地，将第二色域图像的亮度动态范围转换到第将第二色域图像转换到YUV颜色空间；在YUV颜色空间中，对第二色域图像的Y通道进行分度调整后的噪声部分进行亮度融合；以及将亮度融合后的图像从YUV颜色空间转换回到第及将第二亮度动态范围的内容部分从Yxy颜色空间转回到Y[0022]可选地，将第二图像转换为具有第一色域和/或第一亮度动态范围的第三图像的7[0023]可选地，将第二图像转换为具有第一色域和/或第一亮度动态范围的第三图像的[0024]根据本公开的第二个方面，提供了一种针对标准亮度动频转换为具有标准色域和/或标准亮度动态范围[0029]由此，根据本公开的图像增强方案考虑到传统亮度与颜色增强方案的设计局限8[0034]图4是根据本公开实施例基于皮肤颜色保护目的的色彩饱和度增强处理方法的示[0039]图9示出了根据本发明一实施例可用于实现上述图像增强方法的计算设备的结构现在当前仍大量存在的相对较低亮度动态范围的显亮度范围在0-1000nits或0-10000nits)图像的震撼力[0045]以SDR(标准亮度动态范围)图像为例，本公开通过执行基于标准色域及标准亮度[0048]第一增强装置100用于基于第一色域(例如标准色域BT709)和/或第一亮度动态范9[0051]本公开下文中参考图3和图4给出了一种在第一色域和/或第一亮度动态范围进行[0053]第二增强装置200用于基于第二色域和/或第二亮度范围(例如广色域和高亮度动有更好的亮度、对比度与色彩效果的广色域(例如BT2020色域)和高亮度动态范围(HDR)的[0056]然后，反向映射装置300对经过第二增强装置200转换增强的图像进行色域和/或度动态范围的图像反向映射回到与原图像相同的标准色域及标准亮度动[0057]在反向映射的转换过程中，可以尽可能保持第二增强装置200进行图像增强得到亮度动态范围内，对具有第一色域和/或第一亮度动态范围的图像(初始图像)进行图像增[0063]下面参考图3详细描述本公开实施例的一种基于第一色域和/或第一亮度动态范[0068]采用局部直方图与全局直方图信息相结合的方式，在图像的RGB色彩空间中完成[0072]图4是根据本公开实施例在步骤S130中基于皮肤颜色保护目的的色彩饱和度增强[0074]例如，可以通过在HSV空间中基于H参数统计量和S参数统计量来计算第一皮肤颜[0079]另外，还可以通过在YCbCr空间中基于Cb参数统计量和Cr参数统计量来计算第二[0080]与上面描述的类似，同样通过线下训练大量的皮肤颜色图像，得到皮肤颜色的[0086]一种简单的融合方式可以是取第一皮肤颜色相似度和第二皮肤颜色相似度中较二亮度动态范围(例如HDR)的上限比第一亮度动态范围(例如SD[0095]关于基于第二色域及第二亮度动态范围的图像增强，可以采用各种现有解决方BT202色域和HDR亮度动态范围，还可以在其它高色域及亮度动态范围内进行调整，例如将第一图像转换为具有第二色域和/或第二亮度动态范围的第二图像之后进行，也可以在将第一图像转换为具有第二色域和/或第二亮度动态范围的第二图像的[0097]下面参考图5描述本公开实施例给出的基于广色域和高亮度动态范围的图像增强中实现在第二色域和/或第二亮度动态范围内进行的域(例如BT2020色域)和高亮度动态范围(例如HDR)进[0105]图6是根据本公开实施例在步骤S230中进行亮度动态范围转换的方法的示意性流[0113]在步骤S2334，将第二亮度动态范围的内容部分从Yxy颜色空间转回到YUV颜色空增强后的第二亮度动态范围图像转换为具有非线性亮度的非线性亮度图像，作为第二图域和/或第一亮度动态范围的第一图像转换为具有第二色域和/或第二亮度动态范围的第[0124]这里，可以采用多种现有反向映射方案来进行图像从第二色域和/或第二亮度动态范围到第一色域和/或第一亮度动态范围的映射，例如基于曲线映射或基于深度学习的[0135]例如，可以首先将第一次增强结果(第一图像)与反向映射结果(反向映射结果图[0143]在本公开的实施例中，以视频增强为例，可以提供一种针对标准亮度动态范围[0144]首先，将具有标准色域(例如BT709)和/或标准亮度动态范围(SDR)的第一视频转换为具有广色域(BT2020)和/或高亮度动态范围(HDR)的第二视频，在广色域(BT2020)和/[0145]然后，再将第二视频转换为具有标准色域(例如BT709)和/或标准亮度动态范围[0148]图9示出了根据本发明一实施例可用于实现上述图像增强方法的计算设备的结构处理器920可以包含一个通用的主处理器以及一个或多个特殊的协处理器，例如图形处理储媒介不包含载波和通过无线或有线传输的瞬间电算机程序或计算机程序产品包括用于执行本发明的上述方法中限定的上述各步骤的计算[0155]或者，本发明还可以实施为一种非暂时性机器可读存储介质(或计算机可读存储当所述可执行代码(或计算机程序、或计算机指令代码)被电子