一种AR互动方法、装置、设备及存储介质制造方法及图纸

本公开提供了一种AR互动方法、装置、设备及存储介质，通过获取的第一用户端采集的、现实场景的多张第一视频图像，识别图像中的目标对象在现实场景中的现实位置及识别目标对象的动作，进而根据动作生成虚拟对象，将虚拟对象与现实位置进行绑定保存，这样，借助终端所采集的视频图像，即可得到用户所创作的虚拟对象，进而将虚拟对象和现实位置进行绑定保存，从而实现AR互动，可以有效降低对特定设备的依赖，减少设备方面的造价消耗，还可以降低AR互动中对用户设备端计算资源消耗和依赖，可以降低AR互动门槛，简化AR互动的复杂度，增加AR交互的适用性和便利度，有利于提高用户的AR体验。验。验。

【技术实现步骤摘要】
一种AR互动方法、装置、设备及存储介质


[0001]本公开涉及AR
，具体而言，涉及一种AR互动方法、装置、设备及存储介质。

技术介绍

[0002]随着科技的发展和进步，各种新技术的出现和不断发展，让人们的生活质量得到不断提高。增强现实(augmentedreality，AR)技术，是一种将虚拟信息与真实世界巧妙融合的技术，借助AR技术，人们可以通过特定设备，例如AR眼镜等，来感受现实世界映射到虚拟世界，从而可以实现在虚拟世界进行娱乐或互动等。
[0003]在通过AR技术进行娱乐或互动等体验时，大多是需要在特定场所，通过特定设备进行体验，具有较大的局限性。

技术实现思路

[0004]本公开实施例至少提供一种AR互动方法、装置、设备及存储介质。
[0005]本公开实施例提供了一种AR互动方法，所述方法包括：
[0006]获取第一用户端采集的、现实场景的多张第一视频图像，所述第一视频图像包含目标对象；
[0007]基于所述多张第一视频图像，识别所述目标对象在所述现实场景中的现实位置，以及识别所述目标对象的动作；
[0008]根据所述目标对象的动作，生成虚拟对象；
[0009]将所述虚拟对象与所述现实位置进行绑定保存。
[0010]本公开实施例中，借助终端所采集的视频图像，即可得到用户所创作的虚拟对象，进而将虚拟对象和现实位置进行绑定保存，从而实现AR互动，可以有效降低对特定设备的依赖，减少设备方面的造价消耗，还可以降低AR互动中对用户设备端中计算资源的消耗和依赖，可以降低AR互动门槛，简化AR互动的复杂度，增加AR交互的适用性和便利度，有利于提高用户的AR体验。
[0011]一种可选的实施方式中，基于所述多张第一视频图像，识别所述目标对象在所述现实场景中的现实位置，包括：
[0012]基于所述多张第一视频图像中的至少一张，提取图像特征；
[0013]基于所述图像特征，在所述现实场景对应的AR场景模型中进行匹配，得到所述目标对象在所述现实场景中的现实位置。
[0014]本公开实施例中，通过视频图像中的图像特征在所述现实场景对应的AR场景模型中进行匹配，得到所述目标对象在所述现实场景中的现实位置，可以保证得到的目标对象在所述现实场景中的现实位置的精准度。
[0015]一种可选的实施方式中，所述识别所述目标对象的动作，包括：
[0016]针对每张第一视频图像，确定所述目标对象在所述第一视频图像中的图像位置；
[0017]基于所述多张第一视频图像确定出的多个所述图像位置，确定所述目标对象的移
动轨迹；
[0018]基于所述移动轨迹，确定所述目标对象的动作。
[0019]本公开实施例中，通过图像中位置的识别即可确定目标对象的移动轨迹，从而确定目标对象的动作，识别方式简单有效，可以减少AR互动中对于特定设备的依赖，降低时间和地点对于AR互动的限制，简化AR互动对于用户的复杂度。
[0020]一种可选的实施方式中，所述根据所述目标对象的动作，生成虚拟对象，包括：
[0021]基于所述移动轨迹，生成虚拟对象，所述虚拟对象的轮廓与所述移动轨迹相匹配。
[0022]一种可选的实施方式中，在所述将所述虚拟对象与所述现实位置进行绑定保存之后，所述方法包括：
[0023]通过所述第一用户端向第一用户展示所述虚拟对象在所述现实场景中的AR效果画面。
[0024]本公开实施例中，可以直接通过用户端展示所述虚拟对象在所述现实场景中的AR效果画面，可以及时对用户进行反馈，减少对于特定呈现设备的依赖，降低AR互动的成本和复杂度，有利于提高用户的AR体验。
[0025]一种可选的实施方式中，在所述通过所述第一用户端向第一用户展示所述虚拟对象在所述现实场景中的AR效果画面之后，所述方法包括：
[0026]接收所述第一用户针对所述AR效果画面中所述虚拟对象的控制操作；
[0027]控制所述虚拟对象在所述AR效果画面中执行与所述控制操作对应的指令。
[0028]本公开实施例中，通过控制所述虚拟对象在所述现实场景中执行与所述控制操作对应的指令，可以有效增加用户使用时的互动性。
[0029]一种可选的实施方式中，在所述将所述虚拟对象与所述现实位置进行绑定保存之后，所述方法还包括：
[0030]获取所述第一用户端采集的第二视频图像；
[0031]识别所述第二视频图像中的场景位置是否与所述现实位置一致；
[0032]若一致，获取与所述现实位置绑定保存的所述虚拟对象，作为目标虚拟对象；
[0033]通过所述第一用户端向第一用户展示所述目标虚拟对象在所述现实场景中的AR效果画面。
[0034]本公开实施例中，在采集的第二视频图像中的场景位置与第一视频图像中的现实位置一致的情况下，可以直接将与现实位置绑定的虚拟对象作为目标虚拟对象，进而向第一用户进行展示，可以有效实现AR互动中内容的存储、累积和调取，增加用户交互时的便利度。
[0035]一种可选的实施方式中，响应于所述与所述现实位置绑定保存的所述虚拟对象为多个，所述获取与所述现实位置绑定保存的所述虚拟对象，作为目标虚拟对象，包括：
[0036]从多个所述虚拟对象中确定出预设数量的目标虚拟对象。
[0037]一种可选的实施方式中，在所述将所述虚拟对象与所述现实位置进行绑定保存之后，所述方法还包括：
[0038]响应于所述第一用户针对所述虚拟对象施加的允许共享操作，将所述虚拟对象设置为共享状态，以使第二用户能够调取观看所述虚拟对象。
[0039]本公开实施例中，可以通过将虚拟对象设置为共享状态，以使不同用户可以共享
彼此的虚拟对象，有效增加AR交互的适用性和联动性。
[0040]本公开实施例还提供一种AR互动装置，所述装置包括：
[0041]图像获取模块，用于获取第一用户端采集的、现实场景的多张第一视频图像，所述第一视频图像包含目标对象；
[0042]动作识别模块，用于基于所述多张第一视频图像，识别所述目标对象在所述现实场景中的现实位置，以及识别所述目标对象的动作；
[0043]对象生成模块，用于根据所述目标对象的动作，生成虚拟对象；
[0044]对象存储模块，用于将所述虚拟对象与所述现实位置进行绑定保存。
[0045]一种可选的实施方式中，所述动作识别模块具体用于：
[0046]基于所述多张第一视频图像中的至少一张，提取图像特征；
[0047]基于所述图像特征，在所述现实场景对应的AR场景模型中进行匹配，得到所述目标对象在所述现实场景中的现实位置。
[0048]一种可选的实施方式中，所述动作识别模块具体用于：
[0049]针对每张第一视频图像，确定所述目标对象在所述第一视频图像中的图像位置；
[0050]基于所述多张第一视频图像确定出的多个所述图像位置，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种AR互动方法，其特征在于，所述方法包括：获取第一用户端采集的、现实场景的多张第一视频图像，所述第一视频图像包含目标对象；基于所述多张第一视频图像，识别所述目标对象在所述现实场景中的现实位置，以及识别所述目标对象的动作；根据所述目标对象的动作，生成虚拟对象；将所述虚拟对象与所述现实位置进行绑定保存。2.根据权利要求1所述的方法，其特征在于，基于所述多张第一视频图像，识别所述目标对象在所述现实场景中的现实位置，包括：基于所述多张第一视频图像中的至少一张，提取图像特征；基于所述图像特征，在所述现实场景对应的AR场景模型中进行匹配，得到所述目标对象在所述现实场景中的现实位置。3.根据权利要求1所述的方法，其特征在于，所述识别所述目标对象的动作，包括：针对每张第一视频图像，确定所述目标对象在所述第一视频图像中的图像位置；基于所述多张第一视频图像确定出的多个所述图像位置，确定所述目标对象的移动轨迹；基于所述移动轨迹，确定所述目标对象的动作。4.根据权利要求3所述的方法，其特征在于，所述根据所述目标对象的动作，生成虚拟对象，包括：基于所述移动轨迹，生成虚拟对象，所述虚拟对象的轮廓与所述移动轨迹相匹配。5.根据权利要求1所述的方法，其特征在于，在所述将所述虚拟对象与所述现实位置进行绑定保存之后，所述方法包括：通过所述第一用户端向第一用户展示所述虚拟对象在所述现实场景中的AR效果画面。6.根据权利要求5所述的方法，其特征在于，在所述通过所述第一用户端向第一用户展示所述虚拟对象在所述现实场景中的AR效果画面之后，所述方法包括：接收所述第一用户针对所述AR效果画面中所述虚拟对象的控制操作；控制所述虚拟对象在所述AR效果画面中执行与所述控制操作对应的指令。7.根据权利要求1所述的方法，其特征在于，在所述将所述虚拟对象与所述现实位置进行...

【专利技术属性】
技术研发人员：彭心，
申请(专利权)人：深圳市慧鲤科技有限公司，
类型：发明
国别省市：