一种基于稀疏表示的重定位图像质量客观评价方法技术

本发明专利技术公开了一种基于稀疏表示的重定位图像质量客观评价方法，其获取原始图像和重定位图像各自对应的关键点特征矢量集合和显著块特征矢量集合；然后对两个关键点特征矢量集合进行字典训练得到各自对应的结构字典表；并对两个显著块特征矢量集合进行字典训练得到各自对应的显著字典表；接着获取重定位图像相对于原始图像的结构相似度和显著相似度，及原始图像相对于重定位图像的结构相似度和显著相似度；再根据结构相似度和显著相似度得到重定位图像的质量矢量；最后利用支持向量回归技术，根据重定位图像的质量矢量和平均主观评分均值，获取重定位图像的客观质量评价预测值；优点是能够有效地提高客观评价结果与主观感知之间的相关性。

【技术实现步骤摘要】

本专利技术涉及一种图像质量评价方法，尤其是涉及一种基于稀疏表示的重定位图像质量客观评价方法。
技术介绍
随着终端显示设备(例如智能手机、平板电脑、电视等)的快速发展与更新换代，具有不同分辨率和屏幕高宽比的终端显示设备充斥着人们的工作与生活。当需要显示的图像或视频的分辨率与屏幕的分辨率不相符时，如何在尽可能不改变用户观看体验的前提下，改变图像或视频的分辨率使之适应不同尺寸的终端显示设备，这就是重定位(retargeting)问题。当前解决重定位问题的方法有：缩放(scaling)、裁切(cropping)和变形(warping)等。然而，这些重定位方法并不能达到很好的用户体验效果，不能充分利用终端显示设备的尺寸优势，降低了用户体验效果，因此对不同重定位方法的性能进行客观评价十分必要。而对于重定位图像质量评价而言，现有的图像质量评价方法并不能直接应用，这是因为重定位图像的失真并不是简单的图像失真，图像分辨率、场景几何、语义内容等因素都会发生严重变化，因此，如何建立原始图像和重定位图像之间的稠密对应关系，如何对图像分辨率、场景几何、语义内容等因素进行量化以反映质量退化程度，使得客观评价结果更加感觉符合人类视觉系统，都是在对重定位图像进行质量客观评价过程中需要研究解决的问题。
技术实现思路
本专利技术所要解决的技术问题是提供一种基于稀疏表示的重定位图像质量客观评价方法，其能够有效地提高客观评价结果与主观感知之间的相关性。本专利技术解决上述技术问题所采用的技术方案为：一种基于稀疏表示的重定位图像质量客观评价方法，其特征在于包括以下步骤：①令Iorg表示原始图像，令Iret表示Iorg对应的重定位图像；②采用尺度不变特征变换对Iorg进行描述，得到Iorg中的每个关键点的描述，然后将Iorg中的所有关键点的描述组成反映Iorg几何结构信息的关键点特征矢量集合，记为GO，并采用基于语义的显著提取方法提取Iorg的显著图，然后将Iorg的显著图划分成互不重叠的尺寸大小为8×8的显著块，接着从Iorg中的所有显著块中选取部分显著块，之后获取选取的每个显著块的特征矢量，再将选取的所有显著块的特征矢量组成反映Iorg显著语义信息的显著块特征矢量集合，记为其中，Iorg中的每个关键点的描述为该关键点的方向直方图组成的特征矢量，表示Iorg中的第i1个关键点的描述，为Iorg中的第i1个关键点的方向直方图组成的特征矢量，的维数为128×1，M1表示Iorg中的关键点的总个数，表示从Iorg中选取的第j1个显著块的特征矢量，的维数为192×1，N1表示从Iorg中的所有显著块中选取的显著块的总个数；同样，采用尺度不变特征变换对Iret进行描述，得到Iret中的每个关键点的描述，然后将Iret中的所有关键点的描述组成反映Iret几何结构信息的关键点特征矢量集合，记为并采用基于语义的显著提取方法提取Iret的显著图，然后将Iret的显著图划分成互不重叠的尺寸大小为8×8的显著块，接着从Iret中的所有显著块中选取部分显著块，之后获取选取的每个显著块的特征矢量，再将选取的所有显著块的特征矢量组成反映Iret显著语义信息的显著块特征矢量集合，记为SR，其中，Iret中的每个关键点的描述为该关键点的方向直方图组成的特征矢量，表示Iret中的第i2个关键点的描述，为Iret中的第i2个关键点的方向直方图组成的特征矢量，的维数为128×1，M2表示Iret中的关键点的总个数，表示从Iret中选取的第j2个显著块的特征矢量，的维数为192×1，N2表示从Iret中的所有显著块中选取的显著块的总个数；③采用最小角回归方法对GO进行字典训练操作，构造得到Iorg的结构字典表，记为是采用最小角回归方法求解得到的；并采用最小角回归方法对SO进行字典训练操作，构造得到Iorg的显著字典表，记为是采用最小角回归方法求解得到的；其中，的维数为128×K1，K1为设定的字典个数，K1≥1，min{本文档来自技高网...

【技术保护点】
一种基于稀疏表示的重定位图像质量客观评价方法，其特征在于包括以下步骤：①令Iorg表示原始图像，令Iret表示Iorg对应的重定位图像；②采用尺度不变特征变换对Iorg进行描述，得到Iorg中的每个关键点的描述，然后将Iorg中的所有关键点的描述组成反映Iorg几何结构信息的关键点特征矢量集合，记为GO，并采用基于语义的显著提取方法提取Iorg的显著图，然后将Iorg的显著图划分成互不重叠的尺寸大小为8×8的显著块，接着从Iorg中的所有显著块中选取部分显著块，之后获取选取的每个显著块的特征矢量，再将选取的所有显著块的特征矢量组成反映Iorg显著语义信息的显著块特征矢量集合，记为SO，其中，Iorg中的每个关键点的描述为该关键点的方向直方图组成的特征矢量，表示Iorg中的第i1个关键点的描述，为Iorg中的第i1个关键点的方向直方图组成的特征矢量，的维数为128×1，M1表示Iorg中的关键点的总个数，表示从Iorg中选取的第j1个显著块的特征矢量，的维数为192×1，N1表示从Iorg中的所有显著块中选取的显著块的总个数；同样，采用尺度不变特征变换对Iret进行描述，得到Iret中的每个关键点的描述，然后将Iret中的所有关键点的描述组成反映Iret几何结构信息的关键点特征矢量集合，记为GR，并采用基于语义的显著提取方法提取Iret的显著图，然后将Iret的显著图划分成互不重叠的尺寸大小为8×8的显著块，接着从Iret中的所有显著块中选取部分显著块，之后获取选取的每个显著块的特征矢量，再将选取的所有显著块的特征矢量组成反映Iret显著语义信息的显著块特征矢量集合，记为SR，其中，Iret中的每个关键点的描述为该关键点的方向直方图组成的特征矢量，表示Iret中的第i2个关键点的描述，为Iret中的第i2个关键点的方向直方图组成的特征矢量，的维数为128×1，M2表示Iret中的关键点的总个数，表示从Iret中选取的第j2个显著块的特征矢量，的维数为192×1，N2表示从Iret中的所有显著块中选取的显著块的总个数；③采用最小角回归方法对GO进行字典训练操作，构造得到Iorg的结构字典表，记为是采用最小角回归方法求解得到的；并采用最小角回归方法对SO进行字典训练操作，构造得到Iorg的显著字典表，记为是采用最小角回归方法求解得到的；其中，的维数为128×K1，K1为设定的字典个数，K1≥1，min{}为取最小值函数，符号“|| ||2”为求取矩阵的2‑范数符号，符号“|| ||0”为求取矩阵的0‑范数符号，表示的基于的稀疏系数矩阵，的维数为K1×1，τ1为设定的稀疏度，的维数为192×L1，L1为设定的字典个数，L1≥1，表示的基于的稀疏系数矩阵，的维数为L1×1；同样，采用最小角回归方法对GR进行字典训练操作，构造得到Iret的结构字典表，记为是采用最小角回归方法求解得到的；并采用最小角回归方法对SR进行字典训练操作，构造得到Iret的显著字典表，记为是采用最小角回归方法求解得到的；其中，的维数为128×K2，K2为设定的字典个数，K2≥1，表示的基于的稀疏系数矩阵，的维数为K2×1，τ2为设定的稀疏度，的维数为192×L2，L2为设定的字典个数，L2≥1，表示的基于的稀疏系数矩阵，的维数为L2×1；④根据和计算Iret相对于Iorg的结构相似度，记为并根据和计算Iret相对于Iorg的显著相似度，记为同样，根据和计算Iorg相对于Iret的结构相似度，记为并根据和计算Iorg相对于Iret的显著相似度，记为⑤根据和获取Iret的质量矢量，记为Q，其中，Q的维数为1×4，符号“[]”为矢量表示符号；⑥将P幅重定位图像构成重定位图像库，将重定位图像库中的第p幅重定位图像的平均主观评分均值记为MOSp；接着按照步骤①至步骤⑤获取Iret的质量矢量Q的操作，以相同的方式获取重定位图像库中的每幅重定位图像的质量矢量，将重定位图像库中的第p幅重定位图像的质量矢量记为Qp；其中，P>1，1≤p≤P，MOSp∈[1,5]，Qp的维数为1×4；⑦从重定位图像库中随机选择T幅重定位图像构成训练集，将重定位图像库中剩余的P‑T幅重定位图像构成测试集，并令m表示迭代的次数，其中，1<T<P，m的初始值为0；⑧将训练集中的所有重定位图像各自的质量矢量和平均主观评分均值构成训练样本数据集合；接着采用支持向量回归作为机器学习的方法，对训练样本数据集合中的所有质量矢量进行训练，使得经过训练得到的回归函数值与平均主观评分均值之间的误差最小，拟合得到最优的支持向量回归训练模型，记为f(Qinp)；之后根据最优的支持向量回归训练模型，对测试集中的每幅重定位图像的质量矢量进行测试，预测得到测试集中的每幅重定位图像的客观质量评价预测值，将测试集中的...

【技术特征摘要】
1.一种基于稀疏表示的重定位图像质量客观评价方法，其特征在于包括以下步骤：①令Iorg表示原始图像，令Iret表示Iorg对应的重定位图像；②采用尺度不变特征变换对Iorg进行描述，得到Iorg中的每个关键点的描述，然后将Iorg中的所有关键点的描述组成反映Iorg几何结构信息的关键点特征矢量集合，记为GO，并采用基于语义的显著提取方法提取Iorg的显著图，然后将Iorg的显著图划分成互不重叠的尺寸大小为8×8的显著块，接着从Iorg中的所有显著块中选取部分显著块，之后获取选取的每个显著块的特征矢量，再将选取的所有显著块的特征矢量组成反映Iorg显著语义信息的显著块特征矢量集合，记为SO，其中，Iorg中的每个关键点的描述为该关键点的方向直方图组成的特征矢量，表示Iorg中的第i1个关键点的描述，为Iorg中的第i1个关键点的方向直方图组成的特征矢量，的维数为128×1，M1表示Iorg中的关键点的总个数，表示从Iorg中选取的第j1个显著块的特征矢量，的维数为192×1，N1表示从Iorg中的所有显著块中选取的显著块的总个数；同样，采用尺度不变特征变换对Iret进行描述，得到Iret中的每个关键点的描...

【专利技术属性】
技术研发人员：姜求平，邵枫，李福翠，
申请(专利权)人：宁波大学，
类型：发明
国别省市：浙江;33