一种基于高动态范围的视频质量评估方法技术

本发明专利技术公开了一种基于高动态范围的视频质量评估方法，主要步骤为：对输入视频图像的原始帧和失真帧进行预处理；将预处理后的视频图像，利用色貌模型对改进后的高动态范围特征来提取明度、饱和度以及色度特征；将明度、饱和度以及色度特征输入到显著性模型中，并给出当前帧的显著性图，利用显著性图计算误差时的权重；采用对比敏感度作为权重来计算失真帧与原始帧的子带误差度，所述对比敏感度采用JND对比敏感度模型计算所得；利用显著性图作为权重，对子带误差度进行空间金字塔池化，通过不同大小的池化窗口，得到不同维度的特征，再通过把特征连接起来统一维度，得到全局误差。本发明专利技术具有运行速度快、准确率高、受单一特征影响小等优点。

【技术实现步骤摘要】
一种基于高动态范围的视频质量评估方法
本专利技术涉及计算机视觉处理
，尤其涉及一种基于高动态范围的视频质量评估方法。
技术介绍
随着科技的进步和人们的需要，人们对于信息的需求越来越趋于多元化，人们希望无论何时何地都能方便、快捷、灵活地通过语音、数据、图像以及视频等多种方式进行通信。由于视觉信息能够呈现给人们直观、生动的形象，因此数字视频成为了目前媒体通信中最主要的媒体形式，视频直播、视频会议、可视电话等都是基于视频的多媒体应用，由于视频通信使用者和视频服务消费者对于视频的主观感受取决于所谓的视频质量，因此对于视频质量评估的研究显得十分重要。视频质量评估在视频压缩、处理以及通信领域中起着十分重要的作用，实时和非实时视频系统的性能和各种视频传输信道的服务质量最终也可通过视频质量得分反映出来，传输系统可以通过评估得分给出的反馈信息去调节编解码器或者信道参数，从而保证系统的服务质量；同时，视频质量评估还有助于设计、优化符合人类视觉特性的图像视频显示系统。当然，视频质量评估对于视频通信制造商和运营商也有着非常重要的意义，视频质量评估的结果直接影响着他们的决定。动态范围(DynamicRange)是指一个场景的最亮和最暗部分之间的相对比值。众所周知，人眼可以自我调节去适应不同的亮度和色彩环境去捕捉真实世界的场景，传统的低动态范围(LDR)图像、视频由于只能记录有限范围的亮度信息，并不能真实的反映现实世界的亮度范围差别。例如要表现一帧同时包含太阳和极暗环境的图，由于受到亮度范围限制，LDR并不能良好的反映出真实的场景，往往会导致曝光不足或者过度曝光。而高动态范围(HDR)由于可以呈现更高的亮度和对比度，能够更好地模拟真实的场景。因此在现实生活中，高动态范围图像和视频得到了越来越多的应用。对于标准动态范围的图像和视频，传统评估方法一般是测量信号幅度、信噪比等物理参数，这些方法已经有了相关标准。随着视频压缩技术的引入，越来越多的高动态范围(HDR)图像和视频出现在我们的日常生活中，一方面由于人眼存在视觉特性，另一方面由于传统信道带宽的限制，我们需要不断改进视频质量评估的方法去更好的适应新的需求。
技术实现思路
为了克服现有技术存在的缺点与不足，本专利技术提供一种基于高动态范围的视频质量评估方法，具有运行速度快、准确率高、受单一特征影响小等优点。为解决上述技术问题，本专利技术提供如下技术方案：一种基于高动态范围的视频质量评估方法，包括如下步骤：S1、对输入视频图像的原始帧和失真帧根据显示器设备的亮度阈值进行预处理，使视频图像得到适应性的匹配；S2、将预处理后的视频图像，利用色貌模型对改进后的高动态范围特征来提取明度、饱和度以及色度特征；S3、将明度、饱和度以及色度特征输入到显著性模型中，并给出当前帧的显著性图，利用显著性图计算误差时的权重；S4、采用对比敏感度作为权重来计算失真帧与原始帧的子带误差度；所述对比敏感度为视觉系统能觉察的对比度阈值的倒数，所述对比敏感度采用JND对比敏感度模型计算所得；S5、利用显著性图作为权重，对子带误差度进行空间金字塔池化，通过不同大小的池化窗口，得到不同维度的特征，再通过把所有特征连接起来统一维度，得到全局误差。进一步地，所述步骤S1中预处理，其具体为：根据设备的亮度阈限，调整原始帧的亮度范围直至被显示器设备表达。进一步地，所述步骤S2，具体为：S21、对预处理后的视频图像通过锥响应得到三个原始元组L、M、S；其中原始元组L、M、S分别代表短波、中波和长波；和适应场的三刺激值、环境的绝对亮度等参数。S22、对视频图像的原始元组L、M、S，在给定的参数下进行色适应变换得到标准后的结果，所述给定的参数包括适应场的三刺激值和环境的绝对亮度；对标准后的结果进行希尔伯特变换，分别得出消色信号A和两个色度信号a、b，具体公式如下：A＝(40L'+20M'+1S')/61S23、通过消色信号A和两个色度信号a、b，计算图像的明度Q、饱和度s以及色度h三个特征，具体公式如下：J＝100·[E·(J'-1)+1]其中J表示通过亮度响应得到的双曲线函数的逆。进一步地，所述步骤S3，具体为：S31、将明度特征信号经过小波变换，并得到基于最初视频帧的图像信号响应值；同时饱和度和色度特征；S32、对明度、饱和度以及色度特征，给定每帧的特征最大值M，并对全帧进行标准化，得出每一个特征的特征图；所述特征图的特征范围值在0到M之间；S33、整合明度、饱和度以及色度特征的特征图；对于特征图的规模进行调整，根据实际需要而保留所需的特征图；S34、对保留下来的特征图，采用WTA策略决定最终的显著性图。进一步地，所述步骤S4中计算子带误差度，具体为：首先将明度特征信号经过长小波变换到频率域，得到变换后的频率值；根据当前原始帧得出基于人眼视觉亮度特征的对比敏感度；对于饱和度和色度特征，利用对比敏感度进行加权取平均值，最终得出原始帧与失真帧的子带误差度。进一步地，所述步骤S5，具体为：S51、将对比敏感度作为权重值，对子带误差度进行分块；S52、对于分块后的子带误差度，计算每一块的加权时空误差；S53、对加权时空误差通过短期池化得出当前帧的误差结果；S54、利用显著性图作为权重值，将短期池化后的误差结果进行长期池化，得出加权全局误差。采用上述技术方案后，本专利技术至少具有如下有益效果：1、本专利技术具有运行速度快、准确率高、同时适用于高动态范围和标准动态范围视频等特点；2、本专利技术方法采用了色貌模型，通过多个特征通道输出最终结果，进一步降低了由单一特征引起的误差；此外，该方法还在色貌模型进一步计算，为特征的选取提供更多可能；同时多特征的选取也保证了本模型的通用性，使之适应各种具有特殊场景的视频；3、本专利技术方法在传统的池化作用上，通过利用显著性图加权，剔除不必要计算的部分，有助于更好地进行长期池化，使结果更具有可靠性，同时能够在大规模计算时提高计算速度。附图说明图1为本专利技术一种基于高动态范围的视频质量评估方法的步骤流程图；图2为本专利技术一种基于高动态范围的视频质量评估方法中提取特征的步骤流程示意图；图3为本专利技术一种基于高动态范围的视频质量评估方法中计算显著性图的步骤流程示意图；图4为本专利技术一种基于高动态范围的视频质量评估方法的池化作用示意图。具体实施方式需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互结合，下面结合附图和具体实施例对本申请作进一步详细说明。本专利技术采用MATLAB进行实施但不限于此，MATLAB是美国MathWorks公司出品的商业数学软件，用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式环境，主要包括MATLAB和Simulink两大部分。它将数值分析、矩阵计算、科学数据可视化以及非线性动态系统的建模和仿真等诸多强大功能集成在一个易于使用的视窗环境中，为科学研究、工程设计以及必须进行有效数值计算的众多科学领域提供了一种全面的解决方案。建议实施过程采用每帧像素在1920*1080及以上的高动态范围视频。实施例1如图1所示，本专利技术提供了一种基于高动态范围的视频质量评估方法，包括以下步骤：1)对输入视频图像的原始帧和失真帧根据显示器设备的亮度阈值进行预处理，使得视频图像得到适应性的匹本文档来自技高网...

【技术保护点】
一种基于高动态范围的视频质量评估方法，其特征在于，包括如下步骤：S1、对输入视频图像的原始帧和失真帧根据显示器设备的亮度阈值进行预处理，使视频图像得到适应性的匹配；S2、将预处理后的视频图像，利用色貌模型对改进后的高动态范围特征来提取明度、饱和度以及色度特征；S3、将明度、饱和度以及色度特征输入到显著性模型中，并给出当前帧的显著性图，利用显著性图计算误差时的权重；S4、采用对比敏感度作为权重来计算失真帧与原始帧的子带误差度；所述对比敏感度为视觉系统能觉察的对比度阈值的倒数，所述对比敏感度采用JND对比敏感度模型计算所得；S5、利用显著性图作为权重，对子带误差度进行空间金字塔池化，通过不同大小的池化窗口，得到不同维度的特征，再通过把所有特征连接起来统一维度，得到全局误差。

【技术特征摘要】
1.一种基于高动态范围的视频质量评估方法，其特征在于，包括如下步骤：S1、对输入视频图像的原始帧和失真帧根据显示器设备的亮度阈值进行预处理，使视频图像得到适应性的匹配；S2、将预处理后的视频图像，利用色貌模型对改进后的高动态范围特征来提取明度、饱和度以及色度特征；S3、将明度、饱和度以及色度特征输入到显著性模型中，并给出当前帧的显著性图，利用显著性图计算误差时的权重；S4、采用对比敏感度作为权重来计算失真帧与原始帧的子带误差度；所述对比敏感度为视觉系统能觉察的对比度阈值的倒数，所述对比敏感度采用JND对比敏感度模型计算所得；S5、利用显著性图作为权重，对子带误差度进行空间金字塔池化，通过不同大小的池化窗口，得到不同维度的特征，再通过把所有特征连接起来统一维度，得到全局误差。2.根据权利要求1所述的一种基于高动态范围的视频质量评估方法，其特征在于，所述步骤S1中预处理，其具体为：根据设备的亮度阈限，调整原始帧的亮度范围直至被显示器设备表达。3.根据权利要求1所述的一种基于高动态范围的视频质量评估方法，其特征在于，所述步骤S2，具体为：S21、对预处理后的视频图像通过锥响应得到三个原始元组L、M、S；其中原始元组L、M、S分别代表短波、中波和长波；和适应场的三刺激值、环境的绝对亮度等参数。S22、对视频图像的原始元组L、M、S，在给定的参数下进行色适应变换得到标准后的结果，所述给定的参数包括适应场的三刺激值和环境的绝对亮度；对标准后的结果进行希尔伯特变换，分别得出消色信号A和两个色度信号a、b，具体公式如下：A＝(40L'+20M'+1S'...

【专利技术属性】
技术研发人员：许勇，姚佳文，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东,44