基于AI识别和混合现实的目标定位方法技术

本发明专利技术提供了基于AI识别和混合现实的目标定位方法，其对用户当前所处周围环境的周围环境图像进行AI识别分析，得到目标对象的存在状态信息，并确定目标对象在周围环境图像中的存在位置；并根据存在状态信息和目标对象的对象类型，判断目标对象当前在周围环境的状态正常与否，以此生成虚拟显示信息；最后根据目标对象的存在位置，将虚拟显示信息叠加在周围环境图像中，形成混合现实图像，其通过对周围环境图像存在的目标对象进行识别分析，并以目标对象为基准，将虚拟显示信息准确地叠加到周围环境图像中，这样能够根据现实场景的变化有针对性调整虚拟信息的显示状态，提高混合现实显示的视觉感官友善性。示的视觉感官友善性。示的视觉感官友善性。

【技术实现步骤摘要】
基于AI识别和混合现实的目标定位方法


[0001]本专利技术涉及虚拟现实显示的
，特别涉及基于AI识别和混合现实的目标定位方法。

技术介绍

[0002]混合现实技术是将虚拟环境引入到现实场景中，在虚拟世界、现实世界和用户之间搭建交互反馈的信息回路，以增强用户的体验真实感。为了实现在虚拟与现实结合的场景中，进行真正的交互，需要对虚拟世界和现实世界中目标对象所处的位置进行标定，以此作为虚拟环境与现实场景之间的叠加参考基准。但是，现有技术都是将虚拟信息简单地叠加在现实场景中，这使得叠加形成的图像存在一定的视觉违和性，并且无法为用户提供稳定和真实感强的图像显示场景，降低混合现实显示的用户感官友善性。

技术实现思路

[0003]针对现有技术存在的缺陷，本专利技术提供基于AI识别和混合现实的目标定位方法，其对用户当前所处周围环境的周围环境图像进行AI识别分析，得到目标对象的存在状态信息，并确定目标对象在周围环境图像中的存在位置；并根据存在状态信息和目标对象的对象类型，判断目标对象当前在周围环境的状态正常与否，以此生成虚拟显示信息；最后本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.基于AI识别和混合现实的目标定位方法，其特征在于，其包括如下步骤：步骤S1，指示头戴式设备对用户当前所处周围环境进行拍摄，得到周围环境图像；对所述周围环境图像进行AI识别分析处理，得到所述周围环境图像中目标对象的存在状态信息；步骤S2，根据所述目标对象的存在状态信息，确定所述目标对象在所述周围环境图像中的存在位置；再对所述目标对象进行类型识别处理，确定所述目标对象的对象类型；步骤S3，根据所述存在状态信息和所述目标对象的对象类型，判断所述目标对象当前在周围环境的状态正常与否；并根据上述判断结果，生成虚拟显示信息；步骤S4，将所述虚拟显示信息叠加在所述周围环境图像中，形成混合现实图像；并指示头戴式设备向用户显示所述混合显示图像。2.如权利要求1所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S1中，指示头戴式设备对用户当前所处周围环境进行拍摄，得到周围环境图像具体包括：指示头戴式设备的双目摄像头对用户当前所处周围环境进行双目拍摄，得到周围环境双目图像；根据所述周围环境双目图像的双目图像视差，得到周围环境三维图像。3.如权利要求2所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S1中，对所述周围环境图像进行AI识别分析处理，得到所述周围环境图像中目标对象的存在状态信息具体包括：对所述周围环境三维图像进行AI识别分析处理，得到所述周围环境三维图像中所有人和物体各自的三维轮廓特征信息，以此作为目标对象的存在状态信息。4.如权利要求3所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S2中，根据所述目标对象的存在状态信息，确定所述目标对象在所述周围环境图像中的存在位置具体包括：从所述人或物体的三维轮廓特征信息提取得到人或物体的三维外周边缘轮廓边界，根据所述三维外周边缘边界，确定人或物体在所述周围环境三维图像中的几何中心点；再确定所述几何中心点在所述周围环境三维图像中的位置坐标。5.如权利要求4所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S2中，对所述目标对象进行类型识别处理，确定所述目标对象的对象类型具体包括：对所述周围环境三维图像的所有人或物体各自的三维轮廓特征信息进行识别处理，确定每个人的身份信息或每个物体对应所属的物体种类。6.如权利要求5所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S3中，根据所述存在状态信息和所述目标对象的对象类型，判断所述目标对象当前在周围环境的状态正常与否具体包括：根据所述周围环境三维图像中所述人或物体各自的三维轮廓特征信息，确定每个人或物体的动作姿态信息；根据每个人或物体的动作姿态信息，和每个人的身份信息或每个物体对应所属的物体种类，判断每个人或物体当前在周围环境的状态正常与否。7.如权利要求6所述的基于AI识别和混合现实的目标定位方法，其特征在于：
在所述步骤S3中，据上述判断结果，生成虚拟显示信息具体包括：当判断人或物体当前在周围环境的状态正常时，生成第一虚拟显示信息；其中，所述第一虚拟显示信息包括人或物体的身份信息或每个物体对应所属的物体种类信息；当判断人或物体当前在周围环境的状态不正常时，生成第二虚拟显示信息；其中，所述第二虚拟显示信息包括人或物体在所述周围环境三维图像中的位置坐标和动作姿态信息。8.如权利要求7所述的基于AI识别和混合现实的目标定位方法，其特征在于：在所述步骤S4中，将所述虚拟现实信息叠加在所述周围环境图像中，形成混合现实图像；并指示头戴式设备向用户显示所述混合显示图像具体包括：根据每个人或物体在所述周围环境三维图像中的位置坐标，将第一虚拟显示信息或第二虚拟显示信息叠加在所述周围环境三维图像对应的人或物体附近，从而形成混合现实图像；指示头戴式设备的图像投影器向用户投影显...

【专利技术属性】
技术研发人员：王朋，房洪臣，王华，田策，何军潮，
申请(专利权)人：北京领为军融科技有限公司，
类型：发明
国别省市：