MR融合显示方法、融合系统及民机驾驶舱融合系统技术方案

本申请涉及数字仿真技术领域，尤其涉及一种MR融合显示方法、融合系统及民机驾驶舱融合系统。本申请实施例提供的MR融合显示方法，根据实体相机的预设目标参数构建与其相同的虚拟相机；实体相机和虚拟相机同步拍摄实体场景和虚拟场景；提取虚拟目标轮廓区域，根据虚拟目标轮廓区域提取实体相机拍摄的实体场景中的对应的实体区域图像；将提取的实体区域图像融入到虚拟场景中的虚拟目标轮廓区域，完成虚实融合。可实现快速提取实体真实场景中指定对象的像素信息并与虚拟场景中的三维渲染图像进行融合显示，从而提升混合现实仿真的拟真度。本申请提供的融合系统及民机驾驶舱融合系统均基于上述的MR融合显示方法，因此也具有上述的技术效果。述的技术效果。述的技术效果。

【技术实现步骤摘要】
MR融合显示方法、融合系统及民机驾驶舱融合系统


[0001]本申请涉及数字仿真
，尤其涉及一种MR融合显示方法、融合系统及民机驾驶舱融合系统。

技术介绍

[0002]混合现实(Mix Reality，简称MR)，是合并现实世界和虚拟世界而产生的新的可视化环境，可实现物理和数字对象共存，并实时互动。此技术手段兼具虚拟与真实的优势，相较于纯虚拟仿真，可以将部分关键实体场景融入仿真环境增加仿真的真实感；相较于纯实物仿真，可以使用虚拟场景替代大量实物以减少成本并提高可变性。
[0003]随着计算机软硬件技术的发展，MR技术逐渐受到了航空、航天、高铁、船舶及汽车等领域的关注，开始在产品设计评估、复杂大部件制造装配、操作培训及维修保障等方面进行应用研究与推广。混合现实区别于虚拟现实的核心要素在于虚拟世界与真实世界的融合显示，具体来说，即是在虚拟场景中加入真实场景的画面，打破虚拟与现实之间的界限。
[0004]相关技术中，针对虚实融合的问题，通用的方案为在显示单元上与双眼位置接近的地方设置摄像头，用以采集人眼视角下的真实物理场景，进而利本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种MR融合显示方法，其特征在于，所述MR融合显示方法，包括：对实体相机进行标定，获取实体相机的预设目标参数；根据所述实体相机的预设目标参数构建与其相同的虚拟相机；对所述实体相机和所述虚拟相机进行位姿匹配，以使所述实体相机和所述虚拟相机的光心位置以及相机的拍摄方向在运动过程中实时保持一致；选取实体场景中需要进行匹配的目标物体，并在虚拟场景中进行标注；所述实体相机和所述虚拟相机同步拍摄实体场景和虚拟场景；依据拍摄到的所述虚拟场景中的模型三维信息提取虚拟目标轮廓区域；根据所述虚拟目标轮廓区域提取所述实体相机拍摄的实体场景中的对应的实体区域图像；将提取的所述实体区域图像融入到所述虚拟场景中的虚拟目标轮廓区域，完成虚实融合。2.根据权利要求1所述的MR融合显示方法，其特征在于，所述对实体相机进行标定，获取实体相机的预设目标参数，具体包括：采用棋盘标定的方法获取所述实体相机的内参数矩阵、外参数矩阵以及畸变修正参数。3.根据权利要求2所述的MR融合显示方法，其特征在于，所述对所述实体相机和所述虚拟相机进行位姿匹配，以使所述实体相机和所述虚拟相机的光心位置以及相机的拍摄方向在运动过程中实时保持一致，具体包括：在实体场景中放置一个已知尺寸的实体立方体块，并采用所述实体相机对所述实体立方体块进行追踪；同时，在虚拟场景中创建一个相同尺寸的虚拟立方体块模型并完成与所述实体立方体块的坐标匹配；将所述实体相机固定于所述实体立方体块的前方拍摄一张所述实体立方体块的照片，同时控制所述虚拟相机对所述虚拟立方体块模型进行拍摄，并将拍摄到的虚拟图像与实拍图像进行比对，调整所述虚拟相机的位置与朝向至其拍摄到的虚拟图像与实拍图像重合。4.根据权利要求3所述的MR融合显示方法，其特征在于，调整所述虚拟相机的位置与朝向至其拍摄到的虚拟图像与实拍图像重合后，移动所述实体立方体块，再次拍摄移动后的实体图像与虚拟图像，并将拍摄到的虚拟图像与实体图像进行比对，再次调整所述虚拟相机的位置与朝向至其拍摄到的虚拟图像与实拍图像重合；重复移动拍摄的步骤，直至拍摄到的虚拟图像与实体图像实时...

【专利技术属性】
技术研发人员：吕毅，薛阳，王大伟，武玉芬，许澍虹，杨志刚，
申请(专利权)人：中国商用飞机有限责任公司，
类型：发明
国别省市：