一种AR图像生成方法及相关设备技术

本发明专利技术公开一种AR图像生成方法及相关设备，本发明专利技术提供的方法利用AR设备拍摄目标设备的第一现场图像，并基于第一现场图像和其匹配的预设检修图像是否对准来生成用于指示AR设备的对准位置的指示信息，这样，用户可以根据指示信息调节AR图像的位置使得AR设备拍摄的现场图像与预设检修图像对准，并记录此时的AR设备的位姿数据作为第一位姿数据，之后再根据AR设备的实时位姿数据和第一位姿数据来对预设检修图像进行调整并与现场图像进行合成，得到AR图像，这样可以保证在巡检时生成的AR图像中的设备的虚拟图像的姿态与真实图像的实际姿态相对应，可以保证为巡检时提供准确的检修参考图像。参考图像。参考图像。

【技术实现步骤摘要】
一种AR图像生成方法及相关设备


[0001]本专利技术属于AR
，尤其是涉及一种AR图像生成方法及相关设备。

技术介绍

[0002]很多大型设备以及生产线需要定时巡检，运维生产人员在巡检过程发现异常并及时处理，可以保证企业安全生产。
[0003]在现有技术中，运维人员巡检过程中无法随时调取与设备相关的各类图纸、照片、视频等，既会影响巡检效率，也存在一定安全隐患，缺乏现场带入感。
[0004]因此，现有技术还有待改进和提高。

技术实现思路

[0005]针对现有技术的上述缺陷，本专利技术提供一种AR图像生成方法及AR头戴式巡检眼镜，旨在解决现有技术中电站运维人员巡检时无法随时调取与设备相关的图像数据的问题。
[0006]为解决上述技术问题，本专利技术提供如下技术方案：一种AR图像生成方法，其中，所述方法包括：获取AR设备拍摄的目标设备的第一现场图像以及与所述第一现场图像匹配的预设检修图像，根据所述第一现场图像中的特征点的位置数据和所述预设检修图像中的特征点的位置数据判断所述第一现场图像与所述预设检修图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种AR图像生成方法，其特征在于，所述方法包括：获取AR设备拍摄的目标设备的第一现场图像以及与所述第一现场图像匹配的预设检修图像，根据所述第一现场图像中的特征点的位置数据和所述预设检修图像中的特征点的位置数据判断所述第一现场图像与所述预设检修图像是否满足预设的对准关系；当所述第一现场图像和所述预设检修图像不满足所述对准关系时，根据所述第一现场图像和所述预设检修图像生成第一调整数据，根据所述第一调整数据生成指示信息，所述指示信息用于指示所述AR设备的对准位姿，当所述第一现场图像与所述预设检修图像满足所述对准关系时，获取所述第一现场图像对应的所述AR设备的第一位姿数据；获取第二现场图像以及所述第二现场图像对应的所述AR设备的第二位姿数据，根据所述第一位姿数据和所述第二位姿数据将所述预设检修图像与所述第二现场图像进行合成，得到AR图像。2.根据权利要求1所述的AR图像生成方法，其特征在于，获取与所述第一现场图像匹配的预设检修图像，包括：提取所述第一现场图像的图像特征，根据所述第一现场图像的图像特征在预设图像库中提取图像特征与所述第一现场图像的图像特征匹配的图像作为所述预设检修图像；其中，所述第一现场图像的图像特征和所述预设图像库中的图像的图像特征采用同一已训练的神经网络提取。3.根据权利要求2所述的AR图像生成方法，其特征在于，所述神经网络的训练过程为：获取目标训练数据，所述目标训练数据中包括样本检修图像和样本现场图像，所述样本检修图像和所述样本现场图像为相同或不同设备类型的图像；将所述样本检修图像和所述样本现场图像分别输入至所述神经网络，获取所述神经网络输出的第一样本图像特征和第二样本图像特征；将所述第一样本图像特征和所述第二样本图像特征分别输入至分类器，获取所述分类器输出的第一设备类型分类结果和第二设备类型分类结果；根据所述样本检修图像和所述样本现场图像分别对应的设备类型获取第一相似度，根据所述第一设备类型分类结果和所述第二设备类型分类结果获取第二相似度；根据所述第一相似度和所述第二相似度获取第一损失，根据所述第一设备类型分类结果和所述样本检修图像对应的设备类型获取第二损失，根据所述第二设备类型分类结果和所述样本现场图像对应的设备类型获取第三损失；根据所述第一损失、所述第二损失和所述第三损失获取所述目标训练数据对应的总损失，根据所述总损失更新所述神经网络和所述分类器的参数；重新执行所述获取目标训练数据的步骤，直至所述神经网络和所述分类器的参数...

【专利技术属性】
技术研发人员：吴承科，谭勇，杨之乐，余发国，刘祥飞，郭媛君，
申请(专利权)人：中科航迈数控软件深圳有限公司，
类型：发明
国别省市：