VR视频质量评估方法及装置制造方法及图纸

本发明专利技术公开了一种VR视频质量评估方法，包括：获取VR视频的码率、帧率、分辨率和TI，并根据VR视频的码率、帧率、分辨率和TI确定VR视频的平均主观意见分MOS，其中，VR视频的MOS用于表征VR视频的质量。本发明专利技术还公开了一种评估装置。采用本发明专利技术实施例可以有利于提高VR视频评估结果的准确性。

【技术实现步骤摘要】
VR视频质量评估方法及装置
本专利技术涉及视频处理领域，尤其涉及一种VR视频质量评估方法及装置。
技术介绍
虚拟现实(virtualreality，VR)技术是结合多领域(包括计算机图形学、人机交互技术、传感器技术、人机接口技术、人工智能技术等)的前沿技术。通过借助适当装备，欺骗人体感官(比如三维视觉、听觉、嗅觉等)的方式，创造出完全脱离现实的世界，并与其进行体验和交互。简单地说，VR技术就是用计算机创造以假乱真的世界，打造沉浸式、可交互的视听体验的技术。随着VR业务越来越普及，VR产业生态已经起步，无论是运营商、产业伙伴、还是普通消费者，都需要VR业务质量评估方法来评价用户的体验，主要是通过评估VR视频的质量来评价用户的体验，从而牵引VR业务从可用转变到好用，达到促进VR产业的发展的效果。现有技术中，通过视频的码率、分辨率和帧率来评估视频的质量。这是传统视频的质量的评估方法。然而VR视频与传统视频有很大的差别，VR视频是360度全景视频，VR视频有特有的编码方式。若传统视频的质量评估方法来评估VR视频的质量，则产生评估出来的结果准确性不高的问题。
技术实现思路
本专利技术实施例提供一种VR视频质量的评估方法及装置，采用本专利技术的实施例有利于提高VR视频评估结果的准确性。第一方面，本专利技术实施例提供一种VR视频质量评估方法，包括：获取VR视频的码率、帧率、分辨率和时间感知信息(temporalperceptualinformation，TI)，其中，VR视频的TI用于表征VR视频的视频序列在时间上变化量；根据VR视频的码率、帧率、分辨率和TI确定VR视频的平均主观意见分(meanopinionscore)MOS，其中，VR视频的MOS用于表征VR视频的质量。与现有技术相比，通过引入TI作为评估VR视频质量的参数，提高了VR视频质量评估结果的准确性。在一个可行的实施例中，获取VR视频的TI，包括：获取VR视频的相邻两帧图像中相同位置的像素值的差值；根据标准差公式对相邻两帧图像中相同位置的像素值的差值进行计算，以得到VR视频的TI；其中，标准差公式为：其中，pij为相邻两帧图像中当前帧的第i行第j个像素点的像素值与该当前帧的前一帧的第i行第j个像素点的像素值之间的差值，W和H分别为相邻两帧图像的宽度和高度。在一个可行的实施例中，获取VR视频的TI，包括：获取在预设时长Δt内用户的头部转动的角度Δa；根据预设时长Δt和用户的头部转动的角度Δa确定用户的平均头部转动角；根据用户的平均头部转动角度确定VR视频的TI，其中，用户的平均头部转动角度越大，VR视频的TI值越大。在一个可行的实施例中，获取在预设时长Δt内用户的头部转动的角度Δa，包括：获取t时刻用户头部的角度yt和t+Δt时刻用户头部的角度yt+Δt；并按照以下方法确定用户头部转动的角度Δa：当yt+Δt与yt差值的绝对值大于180度，且yt小于yt+Δt时，Δa＝180-abs(yt)+180-abs(yt+Δt)当yt+Δt与yt差值的绝对值大于180度，且yt大于yt+Δt时，Δa＝(180-abs(yt)+180-abs(yt+Δt))-1当yt+Δt与yt差值的绝对值不大于180度时，Δa＝yt+Δt-yt。在一个可行的实施例中，根据用户的平均头部转动角度确定VR视频的TI，包括：将用户的平均头部转动的角度输入到第一TI预测模型中进行计算，以得到VR视频的TI；其中，第一TI预测模型为：TI＝log(m*angleVelocity)+n；angleVelocity为用户的平均头部转动角度，m和n为常数。通过基于用户头部转动的角度来预测VR视频的TI，使得计算TI所需的计算能力可以忽略不计。在一个可行的实施例中，根据用户的平均头部转动角度确定VR视频的TI，包括：将用户的平均头部转动的角度输入到第二TI预测模型中进行计算，以得到VR视频的TI；其中，第二TI预测模型为非参数模型。通过基于用户头部转动的角度来预测VR视频的TI，使得计算TI所需的计算能力可以忽略不计。在一个可行的实施例中，根据VR视频的码率、帧率、分辨率和TI确定VR视频的平均主观意见分MOS，包括：将VR视频的码率、分辨率、帧率和TI输入到质量评估模型中进行计算，以得到VR视频的MOS；其中，质量评估模型为：MOS＝5-a*log(max(log(B1),0.01))-b*log(max(log(B2),0.01))-c*log(max(logF,0.01))-d*log(max(log(TI),0.01))；B1为VR视频的码率，B2为VR视频的分辨率，F为VR视频的帧率，a,b,c,d为常数。第二方面，本专利技术实施例提供一种评估装置，包括：获取单元，用于获取VR视频的码率、帧率、分辨率和时间感知信息TI，其中，VR视频的TI用于表征VR视频的视频序列在时间上的变化量；确定单元，用于根据VR视频的码率、帧率、分辨率和TI确定VR视频的平均主观意见分MOS，其中，VR视频的MOS用于表征VR视频的质量。在一个可行的实施例中，在获取VR视频的TI的方面，获取单元具有用于：获取VR视频的相邻两帧图像中相同位置的像素值的差值；根据标准差公式对相邻两帧图像中相同位置的像素值的差值进行计算，以得到VR视频的TI；其中，标准差公式为：其中，pij为相邻两帧图像中当前帧的第i行第j个像素点的像素值与该当前帧的前一帧的第i行第j个像素点的像素值之间的差值，W和H分别为相邻两帧图像的宽度和高度。在一个可行的实施例中，在获取VR视频的TI的方面，获取单元具有用于：获取在预设时长Δt内用户的头部转动的角度Δa；根据预设时长Δt和用户的头部转动的角度Δa确定用户的平均头部转动角；根据用户的平均头部转动角度确定VR视频的TI，其中，用户的平均头部转动角度越大，VR视频的TI值越大。在一个可行的实施例中，在获取在预设时长Δt内用户的头部转动的角度Δa的方面，获取单元具体用于：获取t时刻用户头部的角度yt和t+Δt时刻用户头部的角度yt+Δt；按照以下方法确定用户头部转动的角度Δa：当yt+Δt与yt差值的绝对值大于180度，且yt小于yt+Δt时，Δa＝180-abs(yt)+180-abs(yt+Δt)当yt+Δt与yt差值的绝对值大于180度，且yt大于yt+Δt时，Δa＝(180-abs(yt)+180-abs(yt+Δt))-1当yt+Δt与yt差值的绝对值不大于180度时，Δa＝yt+Δt-yt。在一个可行的实施例中，在根据用户的平均头部转动角度确定VR视频的TI的方面，获取单元具体用于：将用户的平均头部转动的角度输入到第一TI预测模型中进行计算，以得到VR视频的TI；其中，第一TI预测模型为：TI＝log(m*angle本文档来自技高网...

【技术保护点】
1.一种虚拟现实VR视频质量评估方法，其特征在于，包括：/n获取VR视频的码率、帧率、分辨率和时间感知信息TI，其中，所述VR视频的TI用于表征所述VR视频的视频序列在时间上的变化量；/n根据所述VR视频的码率、帧率、分辨率和TI确定所述VR视频的平均主观意见分MOS，其中，所述VR视频的MOS用于表征所述VR视频的质量。/n

【技术特征摘要】
1.一种虚拟现实VR视频质量评估方法，其特征在于，包括：
获取VR视频的码率、帧率、分辨率和时间感知信息TI，其中，所述VR视频的TI用于表征所述VR视频的视频序列在时间上的变化量；
根据所述VR视频的码率、帧率、分辨率和TI确定所述VR视频的平均主观意见分MOS，其中，所述VR视频的MOS用于表征所述VR视频的质量。


2.根据权利要求1所述的方法，其特征在于，所述获取VR视频的TI，包括：
获取在预设时长Δt内用户的头部转动的角度Δa；
根据所述预设时长Δt和所述用户的头部转动的角度Δa确定用户的平均头部转动角；
根据所述用户的平均头部转动角度确定所述VR视频的TI，其中，所述用户的平均头部转动角度越大，所述VR视频的TI值越大。


3.根据权利要求2所述的方法，其特征在于，所述获取在预设时长Δt内用户的头部转动的角度Δa，包括：
获取t时刻用户头部的角度yt和t+Δt时刻用户头部的角度yt+Δt；
按照以下方法确定用户头部转动的角度Δa：
当yt+Δt与yt差值的绝对值大于180度，且yt小于yt+Δt时，
Δa＝180-abs(yt)+180-abs(yt+Δt)
当yt+Δt与yt差值的绝对值大于180度，且yt大于yt+Δt时，
Δa＝(180-abs(yt)+180-abs(yt+Δt))-1
当yt+Δt与yt差值的绝对值不大于180度时，Δa＝yt+Δt-yt。


4.根据权利要求2或3所述的方法，其特征在于，所述根据所述用户的平均头部转动角度确定所述VR视频的TI，包括：
将所述用户的平均头部转动的角度输入到第一TI预测模型中进行计算，以得到所述VR视频的TI；
其中，所述第一TI预测模型为：TI＝log(m*angleVelocity)+n；
所述angleVelocity为用户的平均头部转动角度，所述m和n为常数。


5.根据权利要求2或3所述的方法，其特征在于，所述根据所述用户的平均头部转动角度确定所述VR视频的TI，包括：
将所述用户的平均头部转动的角度输入到第二TI预测模型中进行计算，以得到所述VR视频的TI；
其中，所述第二TI预测模型为非参数模型。


6.根据权利要求1-5任一项所述的方法，其特征在于，所述根据所述VR视频的码率、帧率、分辨率和TI确定所述VR视频的平均主观意见分MOS，包括：
将所述VR视频的码率、分辨率、帧率和TI输入到质量评估模型中进行计算，以得到所述VR视频的MOS；
其中，所述质量评估模型为：
MOS＝5-a*log(max(log(B1),0.01))-b*log(max(log(B2),0.01))-c*log(max(logF,0.01))-d*log(max(log(TI),0.01))；
所述B1为所述VR视频的码率，所述B2为所述VR视频的分辨率，所述F为所述VR视频的帧率，a,b,c,d为常数。


7.一种评估装置，其特征在于，包括：
获取单元，用于获取虚拟现实VR视频的码率、帧率、分辨率和时间感知信息TI，其中，所述VR视频的TI用于表征所述VR视频的视频序列在时间上的变化量；
确定单元，用于根据所述VR视频的码率、帧率、分辨率和TI确定所述VR视频的平...

【专利技术属性】
技术研发人员：熊婕，黄一宏，陈光，陈建，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：广东;44