一种无参考非对称失真立体图像客观质量评价方法技术

本发明专利技术公开了一种无参考非对称失真立体图像客观质量评价方法，其先对待评价的非对称失真立体图像的左视点图像和右视点图像分别实施伽柏滤波器滤波和高斯滤波器滤波，得到各自的伽柏滤波图像和高斯滤波图像；接着通过模拟人眼视觉特性建立有效的非对称失真立体视觉感知特征融合的数学模型，根据数学模型得到待评价的非对称失真立体图像的左右视点特征融合图像；然后对左右视点特征融合图像进行局部二值化模式操作，得到局部二值化模式结构特征图像，采用直方图统计方法得到直方图统计特征向量；最后根据直方图统计特征向量，采用支持向量回归预测客观质量评价预测值；优点是能够有效地提高客观评价结果与主观感知的相关性。

【技术实现步骤摘要】
一种无参考非对称失真立体图像客观质量评价方法
本专利技术涉及一种立体图像客观质量评价方法，尤其是涉及一种无参考非对称失真立体图像客观质量评价方法。
技术介绍
进入二十一世纪以来，随着立体图像/视频系统处理技术的日趋成熟，以及计算机网络与通信技术的快速发展，已引起人们对立体图像/视频系统的强烈需求。相比传统单视点图像/视频系统，立体图像/视频系统由于能够提供深度信息来增强视觉的真实感，给用户以身临其境的全新视觉体验而越来越受到人们的欢迎，已被认为是下一代媒体主要发展方向，引发了学术界、产业界的广泛关注。然而，人们为了获得更好的立体临场感和视觉体验，对立体视觉主观感知质量提出了更高的要求。立体视觉主观感知质量是衡量立体图像/视频系统性能优劣的一个重要指标。在立体图像/视频系统中，采集、编码、传输、解码及显示等处理环节都会引入一定失真，这些失真将对立体视觉主观感知质量产生不同程度的影响，因此如何有效地进行无参考质量评价是亟需解决的难点问题。综上，评价立体图像质量，并建立与主观质量评价相一致的客观评价模型显得尤为重要。目前，研究人员提出了不少针对单视点视觉质量的无参考评价方法。然而由于缺乏系统理论深入研究非对称失真立体视觉感知特性，还没有有效地无参考非对称失真立体图像质量评价方法。相比单视点视觉质量无参考评价模型，无参考非对称失真立体图像质量评价模型需要考虑不同失真类型立体掩蔽效应以及与之相关的双目竞争/抑制和双目融合等立体感知因素对视觉质量的影响。因此，不能简单地把现有的单视点视觉质量无参考评价模型直接扩展到无参考非对称失真立体图像质量评价方法中。
技术实现思路
本专利技术所要解决的技术问题是提供一种无参考非对称失真立体图像客观质量评价方法，其能够充分考虑到非对称失真的立体视觉特性，能够有效地提高客观评价结果与主观感知的相关性。本专利技术解决上述技术问题所采用的技术方案为：一种无参考非对称失真立体图像客观质量评价方法，其特征在于包括以下步骤：①令Sdis表示待评价的非对称失真的立体图像，将Sdis的左视点图像记为{Ldis(x,y)}，将Sdis的右视点图像记为{Rdis(x,y)}，其中，1≤x≤W,1≤y≤H，W表示Sdis的宽度，H表示Sdis的高度，Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值，Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值；②采用伽柏滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的伽柏滤波图像，将{Ldis(x,y)}的伽柏滤波图像记为将{Rdis(x,y)}的伽柏滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；③采用高斯滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的高斯滤波图像，将{Ldis(x,y)}的高斯滤波图像记为将{Rdis(x,y)}的高斯滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；④采用块匹配方法，计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像，记为{ddis(x,y)}，其中，ddis(x,y)表示{ddis(x,y)}中坐标位置为(x,y)的像素点的像素值；⑤根据和和{ddis(x,y)}，计算Sdis的左右视点特征融合图像，记为{Fdis(x,y)}，将{Fdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为Fdis(x,y)，，其中，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值；⑥采用局部二值化模式操作对{Fdis(x,y)}进行处理，得到{Fdis(x,y)}的局部二值化模式结构特征图像，记为{LBP(x,y)}，其中，LBP(x,y)表示{LBP(x,y)}中坐标位置为(x,y)的像素点的像素值；⑦采用直方图统计方法对{LBP(x,y)}进行统计操作，得到Sdis的直方图统计特征向量，记为{H(m)}，其中，{H(m)}的维数为1×m'维，H(m)表示{H(m)}中的第m个元素，1≤m≤m'，m'＝P+2；⑧采用n″幅原始的无失真的立体图像，建立其在不同失真类型不同失真程度下的失真立体图像集合，该失真立体图像集合包括多幅非对称失真立体图像；然后利用主观质量评价方法分别评价出该失真立体图像集合中的每幅非对称失真立体图像的主观评分，将该失真立体图像集合中的第j幅非对称失真立体图像的主观评分记为DMOSj；再按照步骤①至步骤⑦的操作，以相同的方式获取该失真立体图像集合中的每幅非对称失真立体图像的直方图统计特征向量，将该失真立体图像集合中的第j幅非对称失真立体图像的直方图统计特征向量记为{Hj(m)}；其中，n″>1，1≤j≤N'，N'表示该失真立体图像集合中包含的非对称失真立体图像的总幅数，0≤DMOSj≤100；⑨将该失真立体图像集合中的所有非对称失真立体图像分成两部分，分别构成训练集和测试集；然后利用支持向量回归对训练集中的所有非对称失真立体图像的主观评分和直方图统计特征向量进行训练，使得经过训练得到的回归函数值与主观评分之间的误差最小，拟合得到最优的权值矢量Wopt和最优的偏置项bopt；接着利用Wopt和bopt构造得到支持向量回归训练模型；再根据支持向量回归训练模型，对测试集中的每幅非对称失真立体图像的直方图统计特征向量进行测试，预测得到测试集中的每幅非对称失真立体图像的客观质量评价预测值，将测试集中的第k'幅非对称失真立体图像的客观质量评价预测值记为Qk'，Qk'＝f(xk')，其中，1≤k'≤t'，t'表示测试集中包含的非对称失真立体图像的总幅数，N'表示该失真立体图像集合中包含的非对称失真立体图像的总幅数，f()为函数表示形式，Qk'是xk'的函数，xk'表示测试集中的第k'幅非对称失真立体图像的直方图统计特征向量{Hk′(m)}，(Wopt)T为Wopt的转置矢量，为xk'的线性函数。所述的步骤②中的伽柏滤波器采用log伽柏滤波器；log伽柏滤波器中的中心频率参数w0取值为1，滤波器带宽参数σr取值为0.3，滤波器相角带宽参数σθ取值为0.4。所述的步骤③中的高斯滤波器采用拉普拉斯算子高斯滤波器；拉普拉斯算子高斯滤波器中的尺度参数σ取值为0.5。所述的步骤⑥中局部二值化模式操作中的领域参数P取值为8，局部半径参数R取值为1。与现有技术相比，本专利技术的优点在于：通过深入挖掘非对称失真的立体视觉感知特性，对待评价的非对称失真立体图像的左视点图像和右视点图像分别实施伽柏滤波器滤波和高斯滤波器滤波，得到各自的伽柏滤波图像和高斯滤波图像；接着深入理解非对称失真立体视觉感知质量的影响机理，通过模拟人眼视觉特性建立有效的非对称失真立体视觉感知特征融合的数学模型，根据数学模型得到待评价的非对称失真立体图像的左右视点特征融合图像；然后对左右视点特征融合图像进行局部二值化模式操作，得到局部二本文档来自技高网...

【技术保护点】
一种无参考非对称失真立体图像客观质量评价方法，其特征在于包括以下步骤：①令Sdis表示待评价的非对称失真的立体图像，将Sdis的左视点图像记为{Ldis(x,y)}，将Sdis的右视点图像记为{Rdis(x,y)}，其中，1≤x≤W,1≤y≤H，W表示Sdis的宽度，H表示Sdis的高度，Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值，Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值；②采用伽柏滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的伽柏滤波图像，将{Ldis(x,y)}的伽柏滤波图像记为将{Rdis(x,y)}的伽柏滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；③采用高斯滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的高斯滤波图像，将{Ldis(x,y)}的高斯滤波图像记为将{Rdis(x,y)}的高斯滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；④采用块匹配方法，计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像，记为{ddis(x,y)}，其中，ddis(x,y)表示{ddis(x,y)}中坐标位置为(x,y)的像素点的像素值；⑤根据和和{ddis(x,y)}，计算Sdis的左右视点特征融合图像，记为{Fdis(x,y)}，将{Fdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为Fdis(x,y)，Fdis(x,y)=GL_disγ(x,y)GL_disγ(x,y)+GR_disγ(x,y)×GL_disσ(x,y)+GR_disγ(x+ddis(x,y),y)GL_disγ(x,y)+GR_disγ(x+ddis(x,y),y)×GR_disσ(x+ddis(x,y),y)]]>，其中，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值；⑥采用局部二值化模式操作对{Fdis(x,y)}进行处理，得到{Fdis(x,y)}的局部二值化模式结构特征图像，记为{LBP(x,y)}，其中，LBP(x,y)表示{LBP(x,y)}中坐标位置为(x,y)的像素点的像素值；⑦采用直方图统计方法对{LBP(x,y)}进行统计操作，得到Sdis的直方图统计特征向量，记为{H(m)}，其中，{H(m)}的维数为1×m'维，H(m)表示{H(m)}中的第m个元素，1≤m≤m'，m'＝P+2；⑧采用n″幅原始的无失真的立体图像，建立其在不同失真类型不同失真程度下的失真立体图像集合，该失真立体图像集合包括多幅非对称失真立体图像；然后利用主观质量评价方法分别评价出该失真立体图像集合中的每幅非对称失真立体图像的主观评分，将该失真立体图像集合中的第j幅非对称失真立体图像的主观评分记为DMOSj；再按照步骤①至步骤⑦的操作，以相同的方式获取该失真立体图像集合中的每幅非对称失真立体图像的直方图统计特征向量，将该失真立体图像集合中的第j幅非对称失真立体图像的直方图统计特征向量记为{Hj(m)}；其中，n″>1，1≤j≤N'，N'表示该失真立体图像集合中包含的非对称失真立体图像的总幅数，0≤DMOSj≤100；⑨将该失真立体图像集合中的所有非对称失真立体图像分成两部分，分别构成训练集和测试集；然后利用支持向量回归对训练集中的所有非对称失真立体图像的主观评分和直方图统计特征向量进行训练，使得经过训练得到的回归函数值与主观评分之间的误差最小，拟合得到最优的权值矢量Wopt和最优的偏置项bopt；接着利用Wopt和bopt构造得到支持向量回归训练模型；再根据支持向量回归训练模型，对测试集中的每幅非对称失真立体图像的直方图统计特征向量进行测试，预测得到测试集中的每幅非对称失真立体图像的客观质量评价预测值，将测试集中的第k'幅非对称失真立体图像的客观质量评价预测值记为Qk'，Qk'＝f(xk')，其中，1≤k'≤t'，t'表示测试集中包含的非对称失真立体图像的总幅数，N'表示该失真立体图像集合中包含的非对称失真立体图像的总幅数，f()为函数表示形式，Qk'是xk'的函数，xk'表示测试集中的第k'幅非对称失真立体图像的直方图统计特征向量{Hk′(m)}，(Wopt)T为Wopt的...

【技术特征摘要】
1.一种无参考非对称失真立体图像客观质量评价方法，其特征在于包括以下步骤：①令Sdis表示待评价的非对称失真的立体图像，将Sdis的左视点图像记为{Ldis(x,y)}，将Sdis的右视点图像记为{Rdis(x,y)}，其中，1≤x≤W,1≤y≤H，W表示Sdis的宽度，H表示Sdis的高度，Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值，Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值；②采用伽柏滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的伽柏滤波图像，将{Ldis(x,y)}的伽柏滤波图像记为将{Rdis(x,y)}的伽柏滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；③采用高斯滤波器对{Ldis(x,y)}和{Rdis(x,y)}两幅图像分别进行滤波处理，得到{Ldis(x,y)}和{Rdis(x,y)}各自的高斯滤波图像，将{Ldis(x,y)}的高斯滤波图像记为将{Rdis(x,y)}的高斯滤波图像记为其中，表示中坐标位置为(x,y)的像素点的像素值，表示中坐标位置为(x,y)的像素点的像素值；④采用块匹配方法，计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像，记为{ddis(x,y)}，其中，ddis(x,y)表示{ddis(x,y)}中坐标位置为(x,y)的像素点的像素值；⑤根据和和{ddis(x,y)}，计算Sdis的左右视点特征融合图像，记为{Fdis(x,y)}，将{Fdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为Fdis(x,y)，，其中，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值，表示中坐标位置为(x+ddis(x,y),y)的像素点的像素值；⑥采用局部二值化模式操作对{Fdis(x,y)}进行处理，得到{Fdis(x,y)}的局部二值化模式结构特征图像，记为{LBP(x,y)}，其中，LBP(x,y)表示{LBP(x,y)}中坐标位置为(x,y)的像素点的像素值；⑦采用直方图统计方法对{LBP(x,y)}进行统计操作，得到Sdis的直方图统计特征向量，记为{H(m)}，其中，{H(m)}的维数为1×m'维，H(m)表示{H(m)}中的第m个元素，1≤m≤m'，m'＝P+2，P表示步骤⑥中的局部二值化模式操...

【专利技术属性】
技术研发人员：周武杰，王中鹏，陈寿法，戴芹，邱薇薇，吴茗蔚，鲁琛，郑卫红，
申请(专利权)人：浙江科技学院，
类型：发明
国别省市：浙江;33