视频内容的颜色的色调映射制造技术

为了利用色调映射函数处理图像，已经在参考色调映射函数的参考集合中选择色调映射函数并且将所选择的色调映射函数应用于该图像的颜色。当将该方法应用于视频内容的图像时，提出了在针对图像的这种选择之后增加针对视频内容的接下来的图像对该选择进行验证的步骤。优点是：防止在视频内容内部过于频繁地改变色调映射函数，降低可视化期间的时间不稳定性和视觉不适。

【技术实现步骤摘要】
【国外来华专利技术】视频内容的颜色的色调映射
本专利技术涉及图像的色调或颜色的映射。色调映射被理解为包括压缩颜色范围的色调映射和扩展颜色范围的色调映射(通常称为“逆色调映射”)的通用术语。
技术介绍
文献EP3249606公开了为了处理图像，在参考逆色调映射(iTM)算法的参考集合中选择iTM算法，以及将所选择的ITM算法应用于该图像的颜色，特别是将该图像转换为HDR格式。根据该方法，构建了参考iTM算法的集合。该集合中的任何参考iTM算法都是针对关联参考图像的颜色内容进行了优化的iTM算法。根据该方法，基于与该参考iTM算法相关联的参考图像的颜色内容，将视觉特征与每个参考iTM算法相关联。根据图1所示的该方法，计算要处理的图像IMM的视觉特征VFM，并执行iTM算法TMfM的选择，使得与该选择的iTM算法相关联的视觉特征与要处理的图像的视觉特征最接近(在与集合中其他参考iTM算法相关联的视觉特征之中)。然后将所选择的iTM算法TMfM应用(“色调映射”操作)于要处理的图像IMM，得到处理后的图像TMMIMM。另外请参见SeulKiJang等人发布于2013年SPIE会议第8652卷的题为“ContentDependentContrastEnhancementforDisplaysbasedonCumulativeDistributionFunction(基于累积分布函数的显示器的内容相关对比度增强)”的文章。当将这样的图像处理方法应用于视频内容的图像时，视频内容应被切成镜头，使得在每个镜头内，颜色内容足够均匀，以将相同的所选iTM算法应用于镜头的每个图像。
技术实现思路
为了防止在视频镜头内部过于频繁地改变iTM算法而导致在可视化期间的时间不稳定和视觉不适，提出了在针对镜头的图像选择参考iTM之后，增加针对该镜头的接下来的图像对该选择进行验证的步骤。优选地，还提出了一旦iTM算法得到验证，就渐进地应用iTM算法的任何改变。注意，文献US9406112公开了仅当先前色调映射(TM)函数和新TM函数之间的差异足够大时才改变TM函数。WO2016192937考虑了应用于先前帧的先前TM曲线的全部历史，以使要应用于当前帧的新TM曲线参数化。在US20170070719中，色调映射系统可以使用先前色调曲线参数值的平均值。更准确地，本公开的第一方面涉及一种用于根据色调映射函数对视频内容的图像进行色调或颜色映射的方法，包括：在视频内容的多个连续图像上进行迭代，并且针对多个连续图像中的至少一个图像：根据从所述至少一个图像确定的视觉特征，在色调映射函数的参考集合中选择参考色调映射函数；当所选择的参考色调映射函数与针对多个连续图像中的先前图像而先前选择的色调映射函数不同时，根据验证步骤确定参考色调映射函数；以及将所确定的参考色调映射函数应用于所述至少一个图像，得到相应的经色调映射的图像，其中，参考集合包括与参考视觉特征相关联的参考色调映射函数。在第一方面的变型中，验证步骤使用多个连续图像，并且选择针对连续图像所确定的、最高频率的参考色调映射函数，或者根据相同参考色调映射函数被连续选择的次数来选择参考色调映射函数，或者选择与其他参考色调映射函数相比具有增加的出现次数(occurrence)的参考色调映射函数。在第一方面的进一步变型中，根据基于图像的视觉特征和与该所选择的参考色调映射函数相关联的参考视觉特征之间的最小距离的选择准则，进行参考色调映射函数的选择。在第一方面的进一步变型中，第一参考色调映射函数和第二参考色调映射函数之间的过渡是通过改变两个函数之间的权重在多个图像上渐进地进行的，第一函数的权重在过渡期间减少，并且第二函数的权重在过渡期间增加。在第一方面的进一步变型中，针对视频的第一图像，所选择的参考色调映射函数不需要任何验证步骤并且被应用于视频的第一图像。本公开的第二方面涉及一种根据色调映射函数对视频内容的图像进行色调或颜色映射的装置，包括被配置用于实现上述方法的至少一个处理器。优选地，在由以下组成的组中选择该装置：移动装置、通信装置、游戏装置、平板、膝上型计算机、相机、芯片、服务器、电视机和机顶盒。本公开的第三方面涉及一种可计算的可读存储介质，包括存储的指令，该存储的指令在由处理器执行时执行以上方法。附图说明通过阅读以下以非限制性示例的方式并参照附图给出的描述，将更清楚地理解本专利技术，附图中：-图1是如EP3249606中所描述的逆色调映射方法的流程图。-图2是根据本专利技术的色调映射方法的实施例的流程图。具体实施方式可以通过使用专用硬件以及能够与适当软件相关联地执行软件的硬件来提供附图中所示的各个元件的功能。术语“处理器”的明确使用不应解释为排他地指代能够执行软件的硬件，而可以隐含地包括但不限于数字信号处理器(“DSP”)硬件、用于存储软件的只读存储器(“ROM”)、随机存取存储器(“RAM”)和非易失性存储器。附图中所示的任何切换仅是概念性的。它们的功能可以通过程序逻辑的操作、通过专用逻辑、通过程序控制和专用逻辑的交互、或者甚至手动地实现，如从上下文中更具体地理解的那样，特定技术可由实现者选择。应当理解，图像处理方法可以以硬件、软件、固件、专用处理器或其组合的各种形式来实现。该方法可以特别地实现为硬件和软件的组合。此外，软件可以实现为有形地体现在程序存储单元上的应用程序。应用程序可以上载到包括任何合适架构的计算机并由其执行。优选地，机器在具有诸如一个或更多个中央处理单元(“CPU”)、随机存取存储器(“RAM”)和输入/输出(“I/O”)接口的硬件的设备上实现。该设备还可以包括操作系统和微指令代码。本文所描述的各种处理和功能可以是微指令代码的一部分，也可以是应用程序的一部分，或者可以是它们的任意组合，它们可以由CPU执行。另外，各种其他外围单元可以连接到设备，诸如实际或虚拟键盘、显示装置和附加数据存储单元。总体上，该设备可以特别是移动装置(诸如，智能电话)、通信装置、游戏装置、平板(或平板计算机)、膝上型计算机、电视机、机顶盒、相机、编码芯片或服务器(例如，广播服务器、视频点播服务器或网络服务器)。现在将描述图像处理方法的主要实施例，使用如上所述的设备，该设备具有以本身已知方式配置以实现该方法的至少一个处理器和至少一个存储器。存储器存储参考色调映射算法和关联的视觉特征的参考集合。色调映射是包括压缩颜色范围的色调映射和扩展颜色范围的色调映射(通常称为“逆色调映射”)的通用术语。例如，如EP3249606中所公开的那样如下构建该参考集合：-利用针对每个图像的优化色调映射函数来收集具有不同视觉特征的图像；术语“函数”是通用的并且包括如“算法”、“查找表”(LUT)或“曲线”的任何等同术语；色调映射函数是要色调映射的图像的像素的至少亮度或光亮度的函数；色调映射函数尤其是如文献EP3087730中所描述的亮度的指数函数，其中针对图像的每个像素计算用于该函数的指数值；例如，由调色师使用专用的已知工具针对本文档来自技高网...

【技术保护点】
1.一种用于根据色调映射函数对视频内容的图像进行色调或颜色映射的方法，包括：/n-在所述视频内容的多个连续图像上进行迭代，并且针对所述多个连续图像中的至少一个图像：/n-根据从所述至少一个图像确定的视觉特征，在色调映射函数的参考集合中选择参考色调映射函数；/n-当所选择的参考色调映射函数与针对所述多个连续图像中的先前图像而先前选择的色调映射函数不同时，根据验证步骤确定参考色调映射函数；以及/n-将所确定的参考色调映射函数应用于所述至少一个图像，得到相应的经色调映射的图像，/n其中，所述参考集合包括与参考视觉特征相关联的参考色调映射函数。/n

【技术特征摘要】
【国外来华专利技术】20180711 EP 18305931.01.一种用于根据色调映射函数对视频内容的图像进行色调或颜色映射的方法，包括：
-在所述视频内容的多个连续图像上进行迭代，并且针对所述多个连续图像中的至少一个图像：
-根据从所述至少一个图像确定的视觉特征，在色调映射函数的参考集合中选择参考色调映射函数；
-当所选择的参考色调映射函数与针对所述多个连续图像中的先前图像而先前选择的色调映射函数不同时，根据验证步骤确定参考色调映射函数；以及
-将所确定的参考色调映射函数应用于所述至少一个图像，得到相应的经色调映射的图像，
其中，所述参考集合包括与参考视觉特征相关联的参考色调映射函数。


2.根据权利要求1所述的方法，其中，所述验证步骤使用多个连续图像，并且选择针对所述连续图像所确定的、最高频率的参考色调映射函数。


3.根据权利要求1所述的方法，其中，所述验证步骤使用多个连续图像，并且根据相同参考色调映射函数被连续选择的次数来选择参考色调映射函数。


4.根据权利要求1所述的方法，其中，所述验证步骤使用多个连续图像，并且选择与其他参考色调映射函数相比具有增加的出现次数的参考色调映射函数。<...

【专利技术属性】
技术研发人员：T普利，L考文，J克维克，H格尔穆德，
申请(专利权)人：交互数字VC控股公司，
类型：发明
国别省市：美国;US