一种基于统计特征和深度感知特征的无参考色调映射图像质量评价方法技术

本发明专利技术公开了一种基于统计特征和深度感知特征的无参考色调映射图像质量评价方法。对于统计特征提取，首先，在对应的分形维数图上提取统计特征，用于度量局部纹理的变化；然后，从对应的小波子带图和梯度图中提取第一数字分布特征来捕捉图像结构变化，同时，提取颜色统计特征，用于度量颜色质量退化。对于深度感知特征提取，使用预训练的Inception

【技术实现步骤摘要】
pictures,”IEEE Transactions on Image Processing,vol.26,no.6,pp.2957
‑
2971,Jun.2017(色调映射HDR图像的无参考质量评价))，简称为：HIGRADE。Gu等人提出了一种基于信息熵、统计自然性和结构的盲色调映射图像质量方法(K.Gu,S.Wang,G.Zhai,S.Ma,X.Yang,W.Lin,W.Zhang,and W.Gao,“Blind quality assessment of tone
‑
mapped images via analysis of information,naturalness,and structure,”IEEE Transactions on Multimedia,vol.18,no.3,pp.432
‑
443,Mar.2016(通过分析信息量、自然度和结构特性的无参考色调映射图像质量评估方法))，简称为：BTMQI。Fang等人通过分析色调映射图像的视觉特性，提取梯度特征来度量结构变换，并进一步提取颜色特征来捕获色彩的视觉退化，最后通过支持向量回归进行质量评价(Y.Fang,J.Yan,Y.Zuo,et al.,“Blind quality assessment for tone
‑
mapped images by analysis of gradient and chromatic statistics,”IEEE Transactions on Multimedia,vol.23,pp.955
‑
966,2021(基于梯度和色度统计分析的色调映射图像盲质量评价))，简称为:VQGG。
[0004]综上所述，虽然现存的色调映射图像质量评价方法取得了令人满意的性能，但是仍然存在一定局限性。无参考色调映射图像质量评价方法性能有待进一步提高，在全面考虑感知失真的基础上，如何提出一种可靠的无参考色调映射图像质量评价方法，成为了色调映射图像处理领域具有挑战性的问题。

技术实现思路

[0005]本专利技术所要解决的技术问题是提供一种基于统计特征和深度感知特征的无参考色调映射图像质量评价方法，其无需提供原始图像的任何信息，且能够获得与主观感知质量高度一致的客观评价结果。
[0006]本专利技术解决上述技术问题所采用的技术方案为：一种基于统计特征和深度感知特征的无参考色调映射图像质量评价方法，其特征在于包括以下步骤：
[0007]将待评价的色调映射图像记为M，假定其尺寸为L
×
W，应用一个可变尺寸l
×
w的非线性内核f(s,t)，对相邻像素进行块处理，并找到最高(Pixel
max
)和最低(Pixel
min
)强度像素之间的差异性来计算其对应的分形维度图。具体来说，非线性内核记作f(s,t)，其中，符号表示向下取整操作，r＝2,3,4,...,j表示缩放因子，用于描述像素的特定结构与其周围环境的自相似程度，变量和均为非负整数，其中符号表示向上取整操作；然后，计算覆盖整幅图像所需的方框数，记作N
d
(x,y,d),其中，d＝1,2,3,...,j
‑
1表示矩阵N
d
(x,y,d)的维数；再计算N
d
(x,y,d)和r的斜率，获得该像素的分形维度，通过计算输入图像M所有像素的分形维度，可以获得其对应的分形维度图，记作M
f
；最后，对M
f
进行10bin直方图统计，获得M
f
的直方图统计特征，同时提取其偏度、峰度、熵、中值、标准差等补充特征。最终，提取10维分形维度特征，记为F
f
；
[0008]步骤2：对于给定的色调映射图像M，先使用Fej
é
r
‑
Korovkin小波对图像进行小波
变换。然后，在水平、垂直和对角线方向的子带系数上，分别提取小波系数归一化后的第一位数字分布特征。最后，将提取的水平、垂直和对角线方向的子带系数第一位数分布特征进行串接，得到小波域的27维特征向量，记为F
w
。
[0009]步骤3：对于给定的色调映射图像M，先利用3
×
3的Sobel算子计算M对应的梯度图，记作M
g
。然后，在M
g
上进行归一化操作并提取第一位数字分布特征。最后，提取M
g
对应的9维特征向量，记为F
g
。
[0010]步骤4：对于给定的色调映射图像M，首先，对RGB图像的每个对数分量进行去均值处理，即R
a
(x,y)＝log(R(x,y))
‑
u
R
，G
a
(x,y)＝log(G(x,y))
‑
u
G
，B
a
(x,y)＝log(B(x,y))
‑
u
B
。其中u
R
、u
G
、u
B
分别表示R、G、B图像通道的均值。根据以上公式，可推导出，分别表示R、G、B图像通道的均值。根据以上公式，可推导出，然后将M1、M2和M3的系数拟合为高斯分布，并提取其均值和方差作为颜色特征。最后，可提取6维颜色统计特征，记为F
c
。
[0011]步骤5：级联步骤1～步骤4所提取的特征，构成联合统计特征，记作F
s
,F
s
＝[F
f
,F
w
,F
g
,F
c
]；
[0012]步骤6：对于给定的色调映射图像M，使用ImageNet数据集预训练的Inception
‑
V3模型提取其深度特征。具体来说，先将待评价M输入预先训练的Inception
‑
V3模型，并执行其所有的预定义操作。然后，全局平均池化(Global Average Pooling，GAP)层附加到每个Inception模块的输出，并向每个Inception模块添加GAP层，能够提取不同抽象级别深度感知特征。在深度特征提取过程中，在Inception模块的每一层上提取每个特征图的平均值，并将其串接成一个特征向量。f
k
表示从第k个Inception模块中提取的特征向量。然后，将所有提取的所有层特征向量进行串接，记作其中N为Inception
‑
V3模型中Inception模块的个数，符号表示级联算子。考虑到所提取的深度特征具有高维性，采用主成分分析(Principal Component Analysis，PCA)进行降维处理。最终，将提取的降维后深度特征，记作F
r
‑
d
。
[0013]步骤7：对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于统计特征和深度感知特征的无参考色调映射图像质量评价方法，其特征在于包括以下步骤：步骤1：将待评价的色调映射图像记为M，假定其尺寸为L
×
W，应用一个可变尺寸l
×
w的非线性内核f(s,t)，对相邻像素进行块处理，并找到最高(Pixel
max
)和最低(Pixel
min
)强度像素之间的差异性来计算其对应的分形维度图。具体来说，非线性内核记作f(s,t)，其中，符号表示向下取整操作，r＝2,3,4,...,j表示缩放因子，用于描述像素的特定结构与其周围环境的自相似程度，变量和均为非负整数，其中符号表示向上取整操作；然后，计算覆盖整幅图像所需的方框数，记作N
d
(x,y,d),其中，d＝1,2,3,...,j
‑
1表示矩阵N
d
(x,y,d)的维数；再计算N
d
(x,y,d)和r的斜率，获得该像素的分形维度，通过计算输入图像M所有像素的分形维度，可以获得其对应的分形维度图，记作M
f
；最后，对M
f
进行10bin直方图统计，获得M
f
的直方图统计特征，同时提取其偏度、峰度、熵、中值、标准差等补充特征。最终，提取10维分形维度特征，记为F
f
；步骤2：对于给定的色调映射图像M，先使用Fej
é
r
‑
Korovkin小波对图像进行小波变换。然后，在水平、垂直和对角线方向的子带系数上，分别提取小波系数归一化后的第一位数字分布特征。最后，将提取的水平、垂直和对角线方向的子带系数第一位数分布特征进行串接，得到小波域的27维特征向量，记为F
w
。步骤3：对于给定的色调映射图像M，先利用3
×
3的Sobel算子计算M对应的梯度图，记作M
g
。然后，在M
g
上进行归一化操作并提取第一位数字分布特征。最后，提取M
g
对应的9维特征向量，记为F
g
。步骤4：对于给定的色调映射图像M，首先，对RGB图像的每个对数分量进行去均值处理，即R
a
(x,y)＝log(R(x,y))
‑
u
R
，G
a
(x,y)＝log(G(x,y))
‑
u
G
，B
a
(x,y)＝log(B(x,y))
‑
u
B
...

【专利技术属性】
技术研发人员：崔跃利，蔡思文，徐佳渂，方喆炜，刘丽红，
申请(专利权)人：台州学院，
类型：发明
国别省市：