目标的追踪方法、装置、设备及存储介质制造方法及图纸

本公开提出了一种目标的追踪方法、装置、设备及存储介质，涉及计算机技术领域，方案为：确定待追踪目标在第i帧画面中检测框的尺寸、参考中心点坐标及第一画面；根据参考中心点坐标、第一参考步长及参考范围，确定第i+1帧画面中候选框对应的候选中心点坐标；根据每个候选中心点坐标及检测框尺寸，确定各个第二画面；根据每个第二、第一画面间的相似度，确定目标候选框；基于候选中心点坐标及第二参考步长，返回执行确定候选中心点坐标的操作，直至满足条件，根据新候选框中对应的第二、第一画面间的相似度，确定待追踪目标的位置。由此，不仅可以对动态的目标进行实时跟踪，且在保证了跟踪精度的情况下，避免了穷举式检索，大大降低了计算量。计算量。计算量。

【技术实现步骤摘要】
目标的追踪方法、装置、设备及存储介质


[0001]本公开涉及计算机
，尤其涉及计算机视觉、深度学习等人工智能
，具体涉及一种目标的追踪方法、装置、设备及存储介质。

技术介绍

[0002]虚拟现实(virtual reality，VR)技术作为当前备受关注的多媒体技术，能够将受众引入到一个完全隔离于真实环境的虚拟空间，从而拓展了受众获取信息的维度。
[0003]目前流行的VR视频表现形式为360全景VR，即通过全景相机拍摄得到的全景环视视频。然而如果我们在VR视频中想要聚焦一个目标，例如一个频繁运动中的球员，那么我们必须时时刻刻的调整我们的头所朝向的位置比如佩戴头显时，或者频繁滑动屏幕，时间长了之后将产生较大的交互疲劳。因而如何对全景图像中中特定目标进行精准、持续的跟踪是当前亟需解决的问题。

技术实现思路

[0004]本公开提供了一种用于目标的追踪方法、装置、设备以及存储介质。
[0005]根据本公开的第一方面，提供了一种目标的追踪方法，包括：
[0006]确定待追踪目标在第i帧画面中所在的检测框的尺寸、参考中心点坐标及所述检测框中的第一画面内容；
[0007]根据所述参考中心点坐标、第一参考步长及参考范围，确定第i+1帧画面中每个候选框对应的候选中心点坐标；
[0008]根据每个所述候选中心点坐标及所述检测框的尺寸，确定每个所述候选框在所述第i+1帧画面中对应的第二画面内容；
[0009]根据每个所述第二画面内容与所述第一画面内容间的相似度，确定目标候选框；
[0010]基于所述目标候选框对应的候选中心点坐标及第二参考步长，返回执行所述确定每个候选框对应的候选中心点坐标的操作，直至满足预设的条件，根据新确定的候选框中对应的第二画面内容与第一画面内容间的相似度，确定所述待追踪目标在所述第i+1帧画面中的位置，其中，i为自然数，所述第二参考步长小于所述第一参考步长。
[0011]根据本公开的第二方面，提供了一种目标的追踪装置，包括：
[0012]第一确定模块，用于确定待追踪目标在第i帧画面中所在的检测框的尺寸、参考中心点坐标及所述检测框中的第一画面内容；
[0013]第二确定模块，用于根据所述参考中心点坐标、第一参考步长及参考范围，确定第i+1帧画面中每个候选框对应的候选中心点坐标；
[0014]第三确定模块，用于根据每个所述候选中心点坐标及所述检测框的尺寸，确定每个所述候选框在所述第i+1帧画面中对应的第二画面内容；
[0015]第四确定模块，用于根据每个所述第二画面内容与所述第一画面内容间的相似度，确定目标候选框；
[0016]第五确定模块，用于基于所述目标候选框对应的候选中心点坐标及第二参考步长，返回执行所述确定每个候选框对应的候选中心点坐标的操作，直至满足预设的条件，根据新确定的候选框中对应的第二画面内容与第一画面内容间的相似度，确定所述待追踪目标在所述第i+1帧画面中的位置，其中，i为自然数，所述第二参考步长小于所述第一参考步长。
[0017]本公开第三方面实施例提出了一种计算机设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如本公开第一方面实施例提出的方法。
[0018]本公开第四方面实施例提出了一种非临时性计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时实现如本公开第一方面实施例提出的方法。
[0019]本公开第五方面实施例提出了一种计算机程序产品，当所述计算机程序产品中的指令处理器执行时，执行本公开第一方面实施例提出的方法。
[0020]本公开提供的目标的追踪方法、装置、设备以及存储介质至少存在以下有益效果：
[0021]本公开实施例中，首先确定待追踪目标在第i帧画面中所在的检测框的尺寸、参考中心点坐标及检测框中的第一画面内容，然后根据参考中心点坐标、第一参考步长及参考范围，确定第i+1帧画面中每个候选框对应的候选中心点坐标，之后根据每个候选中心点坐标及检测框的尺寸，确定每个候选框在第i+1帧画面中对应的第二画面内容，再根据每个第二画面内容与第一画面内容间的相似度，确定目标候选框，最后基于目标候选框对应的候选中心点坐标及第二参考步长，返回执行确定每个候选框对应的候选中心点坐标的操作，直至满足预设的条件，根据新确定的候选框中对应的第二画面内容与第一画面内容间的相似度，确定待追踪目标在第i+1帧画面中的位置。由此，在对目标进行追踪时，通过更新参考步长的方式，不断的更新待检测的候选框，以确定最终的目标候选框，从而不仅可以对动态的目标进行实时跟踪，且在保证了跟踪精度的情况下，避免了穷举式检索，大大降低了计算量。
[0022]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0023]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0024]图1为本公开一实施例所提供的目标的追踪方法的流程示意图；
[0025]图2为本公开一实施例所提供的候选中心点的示意图；
[0026]图3为本公开又一实施例所提供的目标的追踪方法的流程示意图；
[0027]图4为本公开一实施例所提供的候选框的伸缩示意图；
[0028]图5为本公开另一实施例所提供的目标的追踪方法的流程示意图；
[0029]图6为本公开一实施例所提供的目标的追踪装置的结构框图；
[0030]图7是用来实现本公开实施例的目标的追踪方法的电子设备的框图。
具体实施方式
[0031]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种
细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0032]本公开提出的目标的追踪方法可由本公开提供的目标的追踪装置执行，也可以由本公开提供的电子设备执行，其中，电子设备可以包括但不限于VR设备、电脑、智能相机等终端设备，下面以由本公开提供的目标的追踪装置来执行本公开提供的一种目标的追踪方法，而不作为对本公开的限定，以下简称为“装置”。
[0033]下面参考附图对本公开提供的目标的追踪方法、装置、计算机设备及存储介质进行详细描述。
[0034]需要说明的是，本公开实施例中，全景VR视频中的图像可能为拉伸的图像，也即等距柱状投影(Equi
‑
Rectangular Projection，ERP)图像。需要说明的是，ERP图像在形成时通常会发生一定程度的畸变。
[0035]视场角(Field of view，FOV)为人眼视觉所覆盖到的视场，视场角图像也即通常人眼关注部分的图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种目标的追踪方法，其特征在于，包括：确定待追踪目标在第i帧画面中所在的检测框的尺寸、参考中心点坐标及所述检测框中的第一画面内容；根据所述参考中心点坐标、第一参考步长及参考范围，确定第i+1帧画面中每个候选框对应的候选中心点坐标；根据每个所述候选中心点坐标及所述检测框的尺寸，确定每个所述候选框在所述第i+1帧画面中对应的第二画面内容；根据每个所述第二画面内容与所述第一画面内容间的相似度，确定目标候选框；基于所述目标候选框对应的候选中心点坐标及第二参考步长，返回执行所述确定每个候选框对应的候选中心点坐标的操作，直至满足预设的条件，根据新确定的候选框中对应的第二画面内容与第一画面内容间的相似度，确定所述待追踪目标在所述第i+1帧画面中的位置，其中，i为自然数，所述第二参考步长小于所述第一参考步长。2.如权利要求1所述的方法，其特征在于，所述根据每个所述候选中心点坐标及所述检测框的尺寸，确定每个所述候选框在所述第i+1帧画面中对应的第二画面内容，包括：根据每个所述候选中心点坐标与所述参考中心点坐标，确定每个所述候选框对应的伸缩系数；根据每个所述候选框对应的伸缩系数及所述检测框的尺寸，确定每个所述候选框的尺寸；根据每个所述候选框对应的候选中心点及尺寸，确定每个所述候选框在所述i+1帧画面中对应的第二画面内容。3.如权利要求2所述的方法，其特征在于，所述根据每个所述候选框对应的伸缩系数及所述检测框的尺寸，确定每个所述候选框的尺寸，包括：根据每个所述候选中心点坐标与所述参考中心点坐标间的位置关系，确定每个所述候选框对应的变换模式；基于所述变换模式及所述伸缩系数，将所述检测框的尺寸进行变换，以获取每个所述候选框的尺寸。4.如权利要求1所述的方法，其特征在于，在所述基于所述目标候选框对应的候选中心点坐标及第二参考步长之前，还包括：根据所述目标候选框对应的第一相似度，确定所述第二参考步长。5.如权利要求1所述的方法，其特征在于，所述预设的条件包括：执行所述确定每个候选框对应的候选中心点坐标的操作的次数大于或等于第一阈值；和/或，新确定的目标候选框对应的候选中心点坐标，与相邻的前一次目标候选框对应的候选中心点坐标间的差值小于第二阈值。6.如权利要求1
‑
5任一所述的方法，其特征在于，所述根据每个所述候选中心点坐标及所述检测框的尺寸，确定每个所述候选框在所述第i+1帧画面中对应的第二画面内容，包括：确定所述待追踪的目标当前对应的伸缩系数；根据所述伸缩系数及所述检测框的尺寸，确定每个所述候选框的尺寸；
根据每个所述候选框对应的候选中心点及尺寸，确定每个所述候选框在所述i+1帧画面中对应的第二画面内容。7.如权利要求6所述的方法，其特征在于，在所述确定所述待追踪目标在所述第i+1帧画面中的位置之后，还包括：根据所述待追踪目标在所述第第i+1帧画面中的位置及所述参考中心点坐标，对所述待追踪目标对应的伸缩系数进行更新。8.一种目标的追踪装置，其特征在于，包括：第一确定模块，用于确定待追踪目标在第i帧画面中所在的检测框的尺寸、参考中心点坐标及所述检测框中的第一画面内容；第二确定模块，用于根...

【专利技术属性】
技术研发人员：成超，汪贤，鲁方波，
申请(专利权)人：北京金山云网络技术有限公司，
类型：发明
国别省市：