全景视频的视角跟踪方法、装置、设备和介质制造方法及图纸

本申请公开了一种全景视频的视角跟踪方法、装置、设备和介质，所述方法包括：在用户处于有效识别区域时，对用户进行视角跟踪以确定用户的目标视角；基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，所述视角范围为视角原点与全景播放设备边缘形成的角度，所述视角原点为所述有效识别区域的中点；将所述目标图像区域进行全景显示，通过视角跟踪自动调节播放的目标图像区域，为用户提供一种身临其境的全新体验。为用户提供一种身临其境的全新体验。为用户提供一种身临其境的全新体验。

【技术实现步骤摘要】
全景视频的视角跟踪方法、装置、设备和介质


[0001]本公开一般涉及全景显示
，具体涉及一种全景视频的视角跟踪方法、装置、设备和介质。

技术介绍

[0002]全景视频是一种沉浸式虚拟现实技术，因其独特的交互体验方式，受到越来越多的用户青睐。随着液晶显示屏的快速发展，显示屏的分辨率可以达到更理想的高度，进而屏幕画质就越来越清晰细腻，足以播放全景视频。但是，相关技术中，再利用液晶显示屏播放全景视频时，需要用户手动拖动画面，无法为用户提供一种身临其境的感受。

技术实现思路

[0003]鉴于现有技术中的上述缺陷或不足，期望提供一种全景视频的视角跟踪方法、装置、设备和介质，通过视角跟踪自动调节播放的目标图像区域，为用户提供一种身临其境的全新体验。
[0004]第一方面，本申请实施例提供了一种用于全景视频的视角跟踪方法，包括：
[0005]在用户处于有效识别区域时，对用户进行视角跟踪以确定用户的目标视角；
[0006]基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，所述视角范围为视角原点与全景播放设备边缘形成的角度，所述视角原点为所述有效识别区域的中点；
[0007]将所述目标图像区域进行全景显示。
[0008]在一些实施例中，所述有效识别区域为所述全景播放设备前方的预设距离，其中，所述预设距离为所述全景播放设备与障碍物之间距离的预设比例。
[0009]在一些实施例中，利用光流法确定人脸图像中人眼运动检测，并根据所述人眼运动检测结果进行视角跟踪。
[0010]在一些实施例中，所述目标视角包括水平视角和垂直视角；
[0011]所述水平视角为所述用户在水平方向上的视线方向与全景播放设备垂直方向之间的夹角；
[0012]所述垂直视角为所述用户在垂直方向上的视线方向与全景播放设备垂直方向之间的夹角。
[0013]在一些实施例中，所述有效识别区域为立体空间区域，所述基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，包括：
[0014]将所述全景视频的全景球面坐标系构造成所述有效识别区域的外接球；
[0015]基于所述目标视角和所述视角范围，在所述全景球面上确定所述目标图像区域。
[0016]在一些实施例中，将所述全景球面坐标系上以所述目标视角为中心的所述视角范围内的坐标区域作为所述目标图像区域。
[0017]在一些实施例中，所述将所述目标图像区域按照所述全景播放设备的大小进行缩
放后，进行全景显示。
[0018]第二方面，本申请实施例提供了一种用于全景视频的视角跟踪装置，包括：
[0019]跟踪模块，用于在用户处于有效识别区域时，对用户进行视角跟踪以确定用户的目标视角；
[0020]确定模块，用于基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，所述视角范围为视角原点与全景播放设备边缘形成的角度，所述视角原点为所述有效识别区域的中点；
[0021]显示模块，用于将所述目标图像区域进行全景显示。
[0022]第三方面，本申请实施例提供了一种电子设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，该处理器执行该程序时实现如本申请实施例描述的方法。
[0023]第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请实施例描述的方法。
[0024]本申请实施例提出的用于全景视频的视角跟踪方法，能够在用户处于有效识别区域时，通过对用户进行视角跟踪，在全景视频的全景球面坐标系中确定目标图像区域并进行显示，能够实现图随眼动的效果，使得用户观看全景视频时有身临其境的感受，从而有效提高用户体验。
[0025]本专利技术附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。
附图说明
[0026]通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
[0027]图1示出了本申请实施例提供的用于全景视频的视角跟踪方法的实施环境架构图；
[0028]图2示出了本申请一实施例提供的用于全景视频的视角跟踪方法的流程示意图；
[0029]图3示出了本申请一实施例有效识别区域的平面示意图；
[0030]图4示出了本申请一实施例有效识别区域的立体示意图；
[0031]图5示出了本申请另一实施例提供的用于全景视频的视角跟踪方法的流程示意图；
[0032]图6示出了本申请一实施例提供的有效识别区域和全景球面坐标系的位置关系示意图；
[0033]图7示出了本申请一实施例提供的人脸俯仰角固定在同一水平方向上转动确定目标图像区域的原理示意图；
[0034]图8示出了本申请一实施例提供的用于全景视频的视角跟踪装置的结构示意图；
[0035]图9示出了适于用来实现本申请实施例的电子设备或服务器的计算机系统的结构示意图。
具体实施方式
[0036]下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与专利技术相关的部分。
[0037]需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
[0038]本申请提出的用于全景视频的视角跟踪方法具体实施环境参见图1。图1示出了本申请实施例提供的用于全景视频的视角跟踪方法的实施环境架构图。
[0039]如图1所示，该实施环境架构包括：全景播放设备101、服务器102和人脸采集装置103。其中，图1为以人脸采集装置103为全景播放设备101的内置摄像头为例。
[0040]全景播放设备101为能够播放全景视频的显示设备，例如液晶显示屏等。全景播放设备101可设置于墙面上。人脸采集装置103可为摄像头，人脸采集装置103可设置于全景播放设备101上也可独立设置，即，人脸采集装置103可为全景播放设备101的内置摄像头也可为与全景播放设备101直接或间接通讯连接的独立摄像头。
[0041]当人脸采集装置103与全景播放设备101直接连接时，人脸采集装置103将采集到的人脸图像发送至全景播放设备101，以使全景播放设备101将人脸图像发送至服务器102由服务器102对人脸图像进行视角跟踪分析得到目标视角。当人脸采集装置103与全景播放设备101间接连接时，人脸采集装置103将采集到的人脸图像发送至服务器102，以使服务器102对人脸图像进行视角跟踪分析得到目标视角。
[0042]服务器102接收由全景播放设备101或人脸采集装置103发送的人脸图像，并对其进行视角跟踪分析确定目标视角，然后基于目标视角和视角范围，在全景视本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于全景视频的视角跟踪方法，其特征在于，包括：在用户处于有效识别区域时，对用户进行视角跟踪以确定用户的目标视角；基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，所述视角范围为视角原点与全景播放设备边缘形成的角度，所述视角原点为所述有效识别区域的中点；将所述目标图像区域进行全景显示。2.根据权利要求1所述的视角跟踪方法，其特征在于，所述有效识别区域为所述全景播放设备前方的预设距离，其中，所述预设距离为所述全景播放设备与障碍物之间距离的预设比例。3.根据权利要求1所述的视角跟踪方法，其特征在于，还包括：利用光流法确定人脸图像中人眼运动检测，并根据所述人眼运动检测结果进行视角跟踪。4.根据权利要求3所述的视角跟踪方法，其特征在于，所述目标视角包括水平视角和垂直视角；所述水平视角为所述用户在水平方向上的视线方向与全景播放设备垂直方向之间的夹角；所述垂直视角为所述用户在垂直方向上的视线方向与全景播放设备垂直方向之间的夹角。5.根据权利要求1所述的视角跟踪方法，其特征在于，所述有效识别区域为立体空间区域，所述基于所述目标视角和视角范围，在全景视频的全景球面坐标系中确定目标图像区域，包括：将所述全景视频的全景球面坐标系构造成所述有效识别区域的外接球；基于...

【专利技术属性】
技术研发人员：李志，刘江波，李照威，王怀亮，于洪达，王亚星，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：