一种基于机器学习的无参考立体图像质量客观评价方法技术

本发明专利技术公开了一种基于机器学习的无参考立体图像质量客观评价方法，其通过在训练阶段构造视觉字典表，对于任意一幅失真立体图像的左视点图像和右视点图像，根据已构造的视觉字典表，计算左视点图像和右视点图像各自中的每个子块的稀疏系数矩阵，并通过最大池化方法得到左视点图像和右视点图像各自的特征矢量，特征提取简单，计算复杂度低；通过构造左视点图像和右视点图像的支持向量回归训练模型，预测得到测试样本数据集合中的每个特征矢量对应的左视点图像和右视点图像各自的客观质量评价预测值，并根据特征矢量信息进行加权，得到立体图像的客观质量评价预测值，客观评价结果与主观感知之间的相关性高。

【技术实现步骤摘要】

【技术保护点】
一种基于机器学习的无参考立体图像质量客观评价方法，其特征在于包括以下步骤：①选取N幅原始的无失真立体图像的左视点图像构成训练图像集，记为{Li,org|1≤i≤N}，其中，N≥1，Li,org表示{Li,org|1≤i≤N}中的第i幅图像；②利用高斯差分滤波器对{Li,org|1≤i≤N}中的每幅图像实施高斯差分滤波，得到{Li,org|1≤i≤N}中的每幅图像在不同尺度下的滤波图像；③对{Li,org|1≤i≤N}中的每幅图像在不同尺度下的滤波图像进行非重叠的分块处理；然后采用K‑SVD方法对由每个尺度下的N幅滤波图像中的所有子块构成的集合进行字典训练操作，获得每个尺度下的目标训练字典；再将每个尺度下的目标训练字典作为该尺度下的N幅滤波图像的视觉字典表，构造得到{Li,org|1≤i≤N}的视觉字典表，记为D，D＝{Dj|1≤j≤S}，其中，j的初始值为1，S表示高斯差分滤波器的尺度个数，Dj表示第j个尺度下的目标训练字典，Dj亦表示第j个尺度下的N幅滤波图像的视觉字典表，Dj亦表示D中的第j个视觉字典；④将待评价的失真立体图像的左视点图像记为{IL(x,y)}，将待评价的立体图像的右视点图像记为{IR(x,y)}，其中，此处(x,y)表示{IL(x,y)}和{IR(x,y)}中的像素点的坐标位置，1≤x≤W'，1≤y≤H'，W'表示待评价的失真立体图像的宽度，H'表示待评价的失真立体图像的高度，IL(x,y)表示{IL(x,y)}中坐标位置为(x,y)的像素点的像素值，IR(x,y)表示{IR(x,y)}中坐标位置为(x,y)的像素点的像素值；⑤利用高斯差分滤波器对{IL(x,y)}实施高斯差分滤波，得到{IL(x,y)}在不同尺度下的滤波图像；然后对{IL(x,y)}在每个尺度下的滤波图像进行非重叠的分块处理；接着根据{IL(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素和在训练阶段构造得到的视觉字典表D，获取{IL(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素的稀疏系数矩阵；再采用最大池化方法，获取{IL(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素的稀疏系数矩阵经最大池化后得到的稀疏系数矩阵；最后根据{IL(x,y)}对应的所有经最大池化后得到的稀疏系数矩阵，获得{IL(x,y)}的特征矢量，记为FL，其中，j的初始值为1，S表示高斯差分滤波器的尺度个数，在此M'表示{IL(x,y)}在每个尺度下的滤波图像中包含的子块的总个数，表示由{IL(x,y)}在第j个尺度下的滤波图像中的所有子块构成的集合中的第t'个元素的稀疏系数矩阵经最大池化后得到的稀疏系数矩阵；同样，利用高斯差分滤波器对{IR(x,y)}实施高斯差分滤波，得到{IR(x,y)}在不同尺度下的滤波图像；然后对{IR(x,y)}在每个尺度下的滤波图像进行非重叠的分块处理；接着根据{IR(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素和在训练阶段构造得到的视觉字典表D，获取{IR(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素的稀疏系数矩阵；再采用最大池化方法，获取{IR(x,y)}在每个尺度下的滤波图像中的所有子块构成的集合中的每个元素的稀疏系数矩阵经最大池化后得到的稀疏系数矩阵；最后根据{IR(x,y)}对应的所有经最大池化后得到的稀疏系数矩阵，获得{IR(x,y)}的特征矢量，记为FR，其中，在此M'表示{IR(x,y)}在每个尺度下的滤波图像中包含的子块的总个数，表示由{IR(x,y)}在第j个尺度下的滤波图像中的所有子块构成的集合中的第t'个元素的稀疏系数矩阵经最大池化后得到的稀疏系数矩阵；⑥采用n幅失真立体图像建立失真立体图像集合，利用主观质量评价方法获取失真立体图像集合中的每幅失真立体图像的平均主观评分差值，记为DMOS，DMOS＝100‑MOS，其中，MOS表示主观评分均值，DMOS∈[0,100]，n≥1；然后按照步骤⑤中计算待评价的失真立体图像的左视点图像的特征矢量FL和右视点图像的特征矢量FR的操作，以相同的方式计算失真立体图像集合中的每幅立体图像的左视点图像和右视点图像各自的特征矢量，将失真立体图像集合中的第i幅立体图像的左视点图像的特征矢量和右视点图像的特征矢量对应记为Fi,L和Fi,R，其中，1≤i≤n，n表示失真立体图像集合中包含的失真立体图像的幅数；⑦随机选择失真立体图像集合中的m幅失真立体图像构成训练集，将失真立体图像集合中剩余的n‑m幅失真立体图像构成测试集；接着将训练集中的所有失真立体图像各自的左视点图像的特征矢量和训练集中的所有失真立体图像各自的平均主观评分差值构成左视点训练样本数据集合；然后采用支持向量回归作为机器学...

【技术特征摘要】

【专利技术属性】
技术研发人员：邵枫，李柯蒙，李福翠，
申请(专利权)人：宁波大学，
类型：发明
国别省市：浙江;33