System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种混合现实下物体虚实融合的方法、装置、设备及介质制造方法及图纸_技高网

一种混合现实下物体虚实融合的方法、装置、设备及介质制造方法及图纸

技术编号:40813884 阅读:2 留言:0更新日期:2024-03-28 19:34
本发明专利技术属于变电运维检修技术领域,具体提供一种混合现实下物体虚实融合的方法、装置、设备及介质,所述方法包括如下步骤:步骤1:将标志物放置于真实场景中的指定位置;步骤2:利用混合实现设备识别跟踪所述标志物的位姿;步骤3:将扫描所述标志物获取到的虚拟物体和信息进行可视化标记;步骤4:根据扫描到的所述标志物的位姿渲染对应的虚拟物体,将所述虚拟物体融入真实空间中。识别预先设置的二维码,根据二维码的信息和位置展现特定虚拟物体并校准其在真实世界中的位置和姿态,实现在指定位置展示虚拟模型或者虚拟模型和真实物体重叠现实的效果。辅助运维检修,实现对变电设备的数字化管理和控制,支撑变电运维现场作业数字化管控。

【技术实现步骤摘要】

本专利技术涉及变电运维检修,具体涉及一种混合现实下物体虚实融合的方法、装置、设备及介质


技术介绍

1、变电站作为电力系统的关键内容,在电厂与用户间发挥着桥梁作用,确保变电站安全是电能安全稳定供应的重要保障。为了确保变电站的安全稳定运行,需要对变电设备进行监测、故障检测、关联分析和故障溯源等工作,以及及时维修和保养设备。由于变电站内设备种类多、设备投运时间不一,变电运维检修存在着流程复杂、半径长、班组工作量大等问题,如何更好的提高运维检修水平,保证运维检修质量迫在眉睫。由于现有电网企业中,有数量较多的变电设施,可能存在因经验不足,进行变电维护检修时需要一方面查看电路图纸,另一方面查看连接线路,工作人员维护检修过程比较费时费力。

2、采用穿戴式的设计思路,将护目镜、视频采集、显示等功能一体化集成设计头部佩戴使用的混合现实穿戴设备的应用,通过扫描标识信息将对应的电路图纸在混合实现设备的虚拟世界进行显示,这样解决了变电维修传统方式存在的问题,混合现实技术可以将真实环境与虚拟信息叠加显示到同一画面和空间,实现信息间的融合与交互。

3、变电运维人员通过混合现实设备获取现场信息并实时传输给远程业务专家,远程专家结合变电运检现场的情况给予指导建议并反馈现场工作人员;服务器将现场端与远程协助端的双向数据进行处理,实现现场端与远程协助端双向的虚实融合、语音、视频、文本消息以及图片信息的实时传输,支撑变电运维现场作业数字化管控。将对应的电路图纸、模型在混合实现设备的虚拟世界进行显示存在如何将虚拟物体定位到真实世界中的问题,也就是,对于增强现实技术来说,如何将虚拟物体与真实物体叠加现实、虚实相融。增强现实是一种将虚拟信息(如计算机生成的文本,图像和三维模型)融入到现实环境且能够实现无缝集成,渲染及交互的技术,以此让用户在现实环境中更好的感知周围的事物并与其积极互动。基于此,设计一种在混合现实下物体虚实融合的方法来解决的上述问题。


技术实现思路

1、针对变电维护检修过程中,将对应的设备的电路图纸、三维模型在混合实现设备的环境中进行显示存在将虚拟物体定位到真实世界中的问题,本专利技术提供一种混合现实下物体虚实融合的方法、装置、设备及介质。

2、第一方面,本专利技术技术方案提供一种混合现实下物体虚实融合的方法,包括如下步骤:

3、将标志物放置于真实场景中的指定位置;

4、利用混合实现设备识别跟踪所述标志物的位姿;

5、将扫描所述标志物获取到的虚拟物体和信息进行可视化标记;

6、根据扫描到的所述标志物的位姿渲染对应的虚拟物体到真实世界的预设位置,将所述虚拟物体融入真实空间中。

7、作为本专利技术技术方案的优选,所述标志物包括二维码,将标志物放置于真实场景中的指定位置的步骤包括:

8、制作好对应变电设备的模型以及接线图纸等展示内容,依据此内容制作相应规格的二维码;

9、将所述二维码放置到真实场景中的指定位置。

10、作为本专利技术技术方案的优选,将所述二维码放置到真实场景中的指定位置的步骤之后包括:

11、请求获取混合实现设备的扫描权限;

12、判断扫描权限是否获取成功;

13、若是,扫描所述二维码获取所述二维码关联的虚拟物体和信息;

14、若否,执行步骤:请求获取混合实现设备的扫描权限。

15、作为本专利技术技术方案的优选,扫描所述二维码获取所述二维码关联的虚拟物体和信息的步骤包括:

16、响应于获取到的扫描权限扫描摄像机视角内的二维码,识别所扫描的二维码;

17、若扫描到的二维码识别成功,获取所述二维码关联的虚拟物体和信息;

18、若当前所扫描的二维码识别失败,采集摄像机视角内的下一张二维码,识别下一张二维码的图像;直至扫描所有当前摄像机视角内的所有二维码图像。

19、作为本专利技术技术方案的优选,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括:

20、使用microsoft.mixedreality.openxr下的spatialgraphnode类,依据扫描获取到的二维码的guid创建对应的spatialgraphnode;

21、定位扫描到的二维码对应的spatialgraphnode,获取其位置和旋转。

22、作为本专利技术技术方案的优选,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括

23、创建spatialgraphnode;

24、使用trylocate函数,在指定间隔时间去不断追踪对应二维码的位姿;

25、根据追踪到的位姿创建对应的二维码可视化标记预制体组件,并将创建好的组件放入列表中,进行管理。

26、作为本专利技术技术方案的优选,根据扫描到的所述标志物的位姿渲染对应的虚拟物体,将所述虚拟物体融入真实空间中的步骤包括:

27、依据识别到二维码的内容找到对应虚拟物体;

28、根据该物体所关联的二维码的位姿设置虚拟物体位置,达到展示效果。

29、第二方面,本专利技术技术方案还提供一种混合现实下物体虚实融合的装置,包括标志物设置模块、位姿识别模块、可视化标记模块和虚拟物体定位渲染模块;

30、标志物设置模块,用于将标志物放置于真实场景中的指定位置;

31、位姿识别模块,用于利用混合实现设备识别跟踪所述标志物的位姿;

32、可视化标记模块,用于将扫描所述标志物获取到的虚拟物体和信息进行可视化标记;

33、虚拟物体定位渲染模块,用于根据扫描到的所述标志物的位姿渲染对应的虚拟物体到真实世界的预设位置,将所述虚拟物体融入真实空间中。

34、作为本专利技术技术方案的优选,所述标志物包括二维码,标志物设置模块,具体用于制作好对应变电设备的模型以及接线图纸等展示内容,依据此内容制作相应规格的二维码;将所述二维码放置到真实场景中的指定位置。

35、作为本专利技术技术方案的优选,该装置还包括权限获取模块和扫描获取模块;

36、权限获取模块,用于请求获取混合实现设备的扫描权限;判断扫描权限是否获取成功;

37、扫描获取模块,用于扫描所述二维码获取所述二维码关联的虚拟物体和信息。

38、作为本专利技术技术方案的优选,扫描获取模块,具体用于响应于获取到的扫描权限扫描摄像机视角内的二维码,识别所扫描的二维码;若扫描到的二维码识别成功,获取所述二维码关联的虚拟物体和信息;若当前所扫描的二维码识别失败,采集摄像机视角内的下一张二维码,识别下一张二维码的图像;直至扫描所有当前摄像机视角内的所有二维码图像。

39、作为本专利技术技术方案的优选,位姿识别模块,用于使用microsoft.mixedreality.openxr下的spatialgraphnode类,依据扫描获取到的二维码的guid创建对应的spatialgraphnode本文档来自技高网...

【技术保护点】

1.一种混合现实下物体虚实融合的方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,所述标志物包括二维码,将标志物放置于真实场景中的指定位置的步骤包括:

3.根据权利要求2所述的混合现实下物体虚实融合的方法,其特征在于,将所述二维码放置到真实场景中的指定位置的步骤之后包括:

4.根据权利要求3所述的混合现实下物体虚实融合的方法,其特征在于,扫描所述二维码获取所述二维码关联的虚拟物体和信息的步骤包括:

5.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括:

6.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括

7.根据权利要求6所述的混合现实下物体虚实融合的方法,其特征在于,根据扫描到的所述标志物的位姿渲染对应的虚拟物体,将所述虚拟物体融入真实空间中的步骤包括:

8.一种混合现实下物体虚实融合的装置,其特征在于,包括标志物设置模块、位姿识别模块、可视化标记模块和虚拟物体定位渲染模块;

9.一种电子设备,其特征在于,所述电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;存储器存储有可被至少一个处理器执行的计算机程序指令,所述计算机程序指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至7中任一项权利要求所述的混合现实下物体虚实融合的方法。

10.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1至7任一项权利要求所述的混合现实下物体虚实融合的方法。

...

【技术特征摘要】

1.一种混合现实下物体虚实融合的方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,所述标志物包括二维码,将标志物放置于真实场景中的指定位置的步骤包括:

3.根据权利要求2所述的混合现实下物体虚实融合的方法,其特征在于,将所述二维码放置到真实场景中的指定位置的步骤之后包括:

4.根据权利要求3所述的混合现实下物体虚实融合的方法,其特征在于,扫描所述二维码获取所述二维码关联的虚拟物体和信息的步骤包括:

5.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括:

6.根据权利要求1所述的混合现实下物体虚实融合的方法,其特征在于,利用混合实现设备识别跟踪所述标志物的位姿的步骤包括

7.根据权利要求6所述...

【专利技术属性】
技术研发人员:文雷李金林王恒李昊敏姚广耀郭广乾郭瑞邢履帅黄涛谭洪强李增荣王彩芝穆明亮李新涛孙永康耿风慧李建杰王志
申请(专利权)人:国网山东省电力公司滨州供电公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1