基于改进LBP特征的无参考多失真图像质量评价方法技术

本发明专利技术涉及一种基于改进LBP特征的无参考多失真图像质量评价方法，包括：数据准备：选用混合失真数据库，划分训练集和测试集；改进LBP与特征提取，利用改进的LBP算子提取特征，首先得到频率直方图hj,M，将相同半径的LBP和径差LBP直方图连接得到联合直方图HJ＝[HLBP,HDLBP]，最后将三个半径尺度的联合直方图结合，得到集中形式的直方图，作为最终的特征HC；模型建立和质量预测。

【技术实现步骤摘要】
基于改进LBP特征的无参考多失真图像质量评价方法
本专利技术属于图像处理领域，尤其是平面图像的质量评价，涉及一种针对多失真图像的改进LBP特征客观质量评价方法。
技术介绍
随着显示和处理技术的迅猛发展，数字图像在我们的日常生活中发挥着越来越重要的作用。然而，数字图像在获取、处理和传输过程中容易受到多种失真的影响，比如高斯模糊，白噪声，JPEG压缩失真等。图像质量评价(ImageQualityAssessment,IQA)能够识别和量化图像质量等级，已经在图像复原、图像压缩和图像增强等方面得到了广泛的应用。IQA可以分为主观评价和客观评价两类，主观评价与人眼视觉系统(HumanVisualSystem)有很高的一致性，但是主观实验耗时费力，难以用于实际；客观评价根据参考图像信息使用的多少，可以分为全参考(FullReference,FR)、半参考(ReducedReference,RR)和无参考(NoReference,NR)三种类型。如今，已经有大量针对单一失真类型IQA的研究工作，并且取得了较好的效果，但是现实生活中的图像大多属于多失真类型，简单套用单一失真类型的评价方法，难以取得预期的效果，因此找到一种合适且高效的多失真类图像评价方法具有较高的现实意义。
技术实现思路
本专利技术提出评价效果较好的基于改进局部二值模式(LocalBinaryPattern,LBP)特征的无参考多失真图像质量评价方法。该方法充分考虑了视觉机制对图像质量评价的指导，提出一种契合HVS特性的改进LBP算子，利用该算子对多失真图片进行特征提取，经过处理后，将其最终的特征形式和对应的主观质量分数通过支持向量回归进行训练得到一个质量评价模型，利用得到的模型可以对给定的测试图片预测其无参考质量分数，得到一个接近于人眼主观评价的分数，适用于解决无参考的多失真图像评价问题。技术方案如下：一种基于改进LBP特征的无参考多失真图像质量评价方法，包括以下步骤：(1)数据准备选用混合失真数据库，划分训练集和测试集。(2)改进LBP与特征提取通过对标准LBP和径差LBP进行修改，进而获得改进的LBP算子，方法如下：首先，针对标准LBP，取圆对称邻域采样点P＝8，在每一个采样点处设置一个大小为ωR×ωR的块用该块的中值滤波器响应替换距离中心点nc半径为R的邻域采样点ni的灰度值，考虑块尺寸与半径成比例，设置为ωR＝R–1，R取2,4,6三个半径尺度，得到针对标准LBP的改进；然后，与标准LBP的改进相同，可以得到针对径差LBP的改进；利用改进的LBP算子提取特征，首先得到频率直方图hj,M，将相同半径的LBP和径差LBP直方图连接得到联合直方图HJ＝[HLBP,HDLBP]，最后将三个半径尺度的联合直方图结合，得到集中形式的直方图，作为最终的特征HC。(3)模型建立和质量预测将对训练集所提取的特征HC和主观质量分数MOS通过支持向量回归得到一个训练好的质量评价模型，然后在测试集特征提取，预测其质量分数。本专利技术结合视觉机制提出了一种改进的LBP算子(IMLBP)，并提取多失真图片的改进LBP特征，通过支持向量回归对特征进行训练，得到了一个客观图像质量评价模型。通过实验表明，该模型预测的客观质量分数与人眼的主观质量分数有很高的一致性。附图说明图1专利技术实现框图图2LBP和IMLBP算子，(a)标准LBP算子(b)IMLBP算子具体实施方式下面结合附图1对专利技术做进一步阐述。(1)数据准备实验素材选择两个公开的多失真图像数据库，MLIVE和MDID2013，其中，MLIVE数据库包括MLIVE1和MLIVE2两个子库。MLIVE数据库的每个子库包含15张参考图像，225张失真图像，MLIVE1子库的失真类型为GB和JPEG混合失真，MLIVE2失真类型为GB和WN混合失真；MDID2013数据库包含12张参考图像，失真图像有324张，混合失真类型包括GB、JPEG和WN。数据库具体信息见表1。表1两个多失真数据库信息随机选取80％的全库数据作为训练集，其他作为测试集图片。(2)改进LBP与特征提取本专利技术提出了一种用于解决多失真IQA问题的改进多尺度局部二值模式(ImprovedMulti-scaleLocalBinaryPattern,IMLBP)，包括LBP和径差局部二值模式(radiusDifferenceLocalBinaryPattern,DLBP)，其中DLBP反映了径向灰度值的差异。利用IMLBP提取图像的特征，得到的集中直方图能够表示图像失真的程度。标准LBP算子和IMLBP算子见附图2。LBP算子广泛应用于人脸识别和纹理分类。因为图像质量退化通常表现在图像结构信息的损坏，LBP算子能够将图像编码成矩阵形式以描述局部结构信息，因此LBP算子可以应用于处理IQA问题。可以通过如下公式计算：其中，nc为中心像素，P为圆对称邻域像素数，R为邻域半径，决定了空间分辨率，I(nc)，I(ni)分别表示中心像素灰度值和邻域像素灰度值，2i表示编码采样区域，门限函数为：门限T通常取0。式为标准形式的LBP，具有灰度不变性，如附图2(a)所示。旋转不变均匀LBP可以表示为：riu2表示旋转不变均匀模式，μ表示均匀度量，可以通过以下公式得到：LBP算子描述了中心点和它邻域像素的关系，当半径小的时候仅能反映图像的微观结构信息，半径增加的时候，也能一定程度上反映宏观结构信息。但是，随着半径增加，中心点与邻域采样点间距变得很大，导致计算特征映射的时候大多数像素点没有参与计算，因此会造成信息损失。根据人眼视觉机制，当人凝视环境中某一点时，该点及其周围区域以最高空间分辨率采样，远离凝视点的方向，采样分辨率迅速下降，反映了最小的视觉关注区域，且该区域沿径向呈椭圆形排列。受此启发，在式的基础上修改采样点处灰度值，用一个采样区域图像块的滤波器响应来替代，如附图2(b)所示，假设用方块反映形状特征，可以得到改进的LBP算子：其中，表示以距离中心点nc半径为R的邻域采样点ni为中心的圆对称局部块，块尺寸为ωR×ωR，设置P＝8。表示以ni为中心的块的滤波响应，考虑到随着半径增加，邻域采样点数也会增加，块尺寸设置与半径成比例。具体地，ωR＝R–1，采用中值滤波器。与类似可得到，根据中央凹视觉原理，光感受器分布会沿着远离中央凹的方向减少。本专利技术采用DLBP算子来描述径向不同灰度值的关系，与改进LBP类似，同样考虑视觉机制，采样点处的值用块来代替，因此可以得到改进的DLBP算子：表示以距离中心点nc半径为R-1的邻域采样点ni为中心的块，以式类似可以得到DLBP的旋转不变均匀形式算子。利用上述IMLBP[式]特征算子，可以计算得到频率直方图：其中，M表示特征图的类别，j表示特征图中选择的值。结合LBP直方图和DLBP直方图，可以得到联合直方图HJ＝[HLBP,HDLBP]。最后，结合多个半径尺度的联合直方图，可以得到集中形式的直方图HC＝[HJ1,HJ2,…,HJn]，HJn表示半径为n的联合直方图。设置半径为2,4,6三个尺度，将HC作为最终特征提取的结果。(3)模型建立和质量预测特征提取之后，需要采用回归算法将提取的特征映射为质量分数。支持向量回归(SupportVectorR本文档来自技高网...

【技术保护点】
1.一种基于改进LBP特征的无参考多失真图像质量评价方法，包括以下步骤：(1)数据准备选用混合失真数据库，划分训练集和测试集。(2)改进LBP与特征提取通过对标准LBP和径差LBP进行修改，进而获得改进的LBP算子，方法如下：首先，针对标准LBP，取圆对称邻域采样点P＝8，在每一个采样点处设置一个大小为ωR×ωR的块

【技术特征摘要】
1.一种基于改进LBP特征的无参考多失真图像质量评价方法，包括以下步骤：(1)数据准备选用混合失真数据库，划分训练集和测试集。(2)改进LBP与特征提取通过对标准LBP和径差LBP进行修改，进而获得改进的LBP算子，方法如下：首先，针对标准LBP，取圆对称邻域采样点P＝8，在每一个采样点处设置一个大小为ωR×ωR的块用该块的中值滤波器响应替换距离中心点nc半径为R的邻域采样点ni的灰度值，考虑块尺寸与半径成比例，设置为ωR＝R–1，R取2,4,6三个半径尺度...

【专利技术属性】
技术研发人员：侯春萍，李浩，岳广辉，
申请(专利权)人：天津大学，
类型：发明
国别省市：天津,12