一种基于整体和局部分析的无参考立体图像质量评价方法技术

本发明专利技术公开了一种基于整体和局部分析的无参考立体图像质量评价方法，步骤(1)、利用立体图像的左右视图的视差信息产生反映人眼对立体图像在脑海中成像的感官体验的独眼图；步骤(2)、以立体图像的原始左右视图和产生的独眼图作为整体信息输入，构建一个基于卷积神经网络的整体质量评价模型，得到立体图像的整体质量评价分数；步骤(3)、将立体图像的左右原始视图和产生的独眼图分别分割成重叠的小块作为局部信息输入，构建一个基于卷积神经网络的局部质量评价模型，得到立体图像的局部细节质量评价分数；步骤(4)、得到对失真图片最终的评价结果。与现有技术相比，本发明专利技术能够对立体图质量实现与人眼一致的评价效果。

A no reference stereo image quality assessment method based on global and local analysis

The invention discloses a non-reference stereoscopic image quality evaluation method based on global and local analysis, step (1) producing a monocular image reflecting the human eye's sensory experience of stereoscopic image imaging in the mind by using the parallax information of the left and right views of the stereoscopic image; step (2), taking the original left and right views of the stereoscopic image and generating them. As the whole information input, the monocular image is constructed as a whole quality evaluation model based on convolution neural network, and the overall quality evaluation score of the stereo image is obtained; step (3), the left and right original views of the stereo image and the monocular image generated are separated into overlapping blocks as local information input, and a volume-based model is constructed. The local quality evaluation model of product neural network is used to get the local detail quality evaluation score of stereoscopic image, and the final evaluation result of distorted image is obtained by step (4). Compared with the existing technology, the invention can achieve the same evaluation effect on the stereogram quality and the human eye.

【技术实现步骤摘要】
一种基于整体和局部分析的无参考立体图像质量评价方法
本专利技术涉及图像处理、机器学习，图像质量评价等多种领域，特别是涉及一种立体图像质量的评价方法。
技术介绍
近年来，得益于互联网、计算机和通信技术的高速发展，人类已经步入了信息化的时代。其中图像作为视觉信息的载体，已经成为人们日常的生活、工作和娱乐中最普遍的信息传播方式。图像相对于文字、声音等信息载体能够给人们提供更加清楚和真实的感官体验。特别是随着3维(Three-Dimensional，3D)显示技术的快速发展，3DTV、3D电影、虚拟现实游戏、远程教育、虚拟视点合成等等已经走进人们日常的生活和娱乐。这些传统视觉领域和3D技术的应用给人们提供了超越以往观看2D图像的体验，提供了更加真实的立体感觉。但是图像在传输和存储的过程中不可避免的会受到损失，从而影响图像的发展和应用。3D立体图像区别于传统的2D平面图像，立体图像包含平面图像所不具有的视差深度信息。一般来说，3D立体图像是由两台相机模拟人眼的距离拍摄得到分别对应于人的左右眼观测到的两张略有差异的图像组成的。左右两幅视图视差的存在使得图像产生了深度立体信息。人的双眼具有双目视差本文档来自技高网...

【技术保护点】
1.一种基于整体和局部分析的无参考立体图像质量评价方法，其特征在于，该方法包括以下步骤：步骤(1)、利用立体图像的左右视图的视差信息产生反映人眼对立体图像在脑海中成像的感官体验的独眼图，计算公式如下：CI(x,y)＝WL(x,y)×IL(x,y)+WR((x+d),y)×IR((x+d),y)其中，CI(x,y)表示表示生成的独眼图在(x，y)处的像素值，IL和IR分别表示立体图像的左右视图，d表示立体图像的左视图相对于右视图的视差图在(x，y)处的数值，WL和WR则分别表示对左右视图取的权重，左右权重通过计算归一化Gabor滤波能量响应幅值得到，计算公式如下：

【技术特征摘要】
1.一种基于整体和局部分析的无参考立体图像质量评价方法，其特征在于，该方法包括以下步骤：步骤(1)、利用立体图像的左右视图的视差信息产生反映人眼对立体图像在脑海中成像的感官体验的独眼图，计算公式如下：CI(x,y)＝WL(x,y)×IL(x,y)+WR((x+d),y)×IR((x+d),y)其中，CI(x,y)表示表示生成的独眼图在(x，y)处的像素值，IL和IR分别表示立体图像的左右视图，d表示立体图像的左视图相对于右视图的视差图在(x，y)处的数值，WL和WR则分别表示对左右视图取的权重，左右权重通过计算归一化Gabor滤波能量响应幅值得到，计算公式如下：其中，GEL(x,y)和GER((x+d),y)分别表示左右视图在所有尺寸和方向上的能量响应值；步骤(2)、以立体图像的原始左右视图和产生的独眼图作为整体信息输入，构建一个基于Wi的整体质量评价模型，对立体图像的整体体验做出质量评价，得到立体图像的整体质量评价分数，表达式如下；Fi(x)＝max(0,Wi*x+bi)Mg＝F5…F1(x)其中，Wi表示卷积神经网络第i层的...

【专利技术属性】
技术研发人员：刘昱，刘明，
申请(专利权)人：天津大学，
类型：发明
国别省市：天津,12