增强现实融合场景的方法及仿真结果批量验证方法技术

本发明专利技术提供了一种增强现实融合场景的方法及仿真结果批量验证方法，可用于机动车自动驾驶系统的仿真，还可扩展应用于各类以现实环境数据为基础的自动化决策系统。该场景融合的方法包括以下步骤：S1摄像机标定：根据真实图像获得摄像机的内外参数配置；S2场景重建：通过真实环境中可用的传感器组，建立真实世界的三维描述，并对真实场景中可识别目标的坐标、类别特征进行标注；S3场景融合：将虚拟场景与真实场景进行融合。通过本发明专利技术的增强现实技术，可以快速有效的对自动驾驶算法的正确性与性能进行验证。

Augmented Reality Fusion Scene Method and Batch Verification Method of Simulation Results

【技术实现步骤摘要】
增强现实融合场景的方法及仿真结果批量验证方法
本专利技术涉及计算机科学与
中的虚拟现实融合领域、计算机三维建模领域、模式识别领域、网络应用
，特别地，涉及一种增强现实场景融合及批量验证方法。
技术介绍
虚拟现实(virtualreality)，又称虚拟实境，是伴随着计算机图形学技术与模式识别技术发展诞生的一项研究领域，其主要特点与用途是由计算机模拟真实环境中出现的视觉、听觉等信号，并通过各种传感器将这些模拟信号展示给受众，使受众产生身临其境的感觉。增强现实(augmentedreality)技术，是虚拟现实的一项现实应用，是指通过技术手段将虚拟的视觉、听觉等信号与现实环境的真实信号进行融合，生成虚拟与现实结合的场景，达到对现实场景增强的目的。随着技术的成熟，增强现实技术越来越应用于社会的方方面面。机动车自动驾驶系统是近年来工业界研究的热门领域。随着人民生活水平的提高，小轿车等交通工具成为人们主要的代步工具，而交通工具的智能化，将越来越简化出行，为大众提供更多的生活便利。通常情况下，自动驾驶系统的开发需要经历漫长的开发、测试、验证、应用过程，这一过程通常是及其复杂和反复的，本文档来自技高网...

【技术保护点】
1.一种与现实场景结合的增强现实场景融合方法，该方法用于自动驾驶算法的正确性与性能进行验证；所述融合方法包括以下步骤：S1.摄像机标定：根据真实图像获得摄像机的内外参数配置；其中包括对摄像机模型坐标到融合图像坐标的映射；S2.场景重建：通过真实环境中可用的传感器组，建立真实世界的三维描述，并对真实场景中可识别目标的坐标、类别特征进行标注；S3.场景融合：将虚拟场景与真实场景进行融合。

【技术特征摘要】
1.一种与现实场景结合的增强现实场景融合方法，该方法用于自动驾驶算法的正确性与性能进行验证；所述融合方法包括以下步骤：S1.摄像机标定：根据真实图像获得摄像机的内外参数配置；其中包括对摄像机模型坐标到融合图像坐标的映射；S2.场景重建：通过真实环境中可用的传感器组，建立真实世界的三维描述，并对真实场景中可识别目标的坐标、类别特征进行标注；S3.场景融合：将虚拟场景与真实场景进行融合。2.根据权利要求1所述的场景融合方法，所述步骤S1中对于所述摄像机标定中，设定物体的三维坐标是(Xw,Yw,Zw)，而所述物体在融合图像中的坐标是(u,v)；所述摄像机模型是(Xw,Yw,Zw)到(u,v)的映射；所述映射表示为：式(1)中R,t分别为旋转矩阵和平移矩阵，是摄像机外参数；式(2)中f为摄像机焦距，s为畸变因子，r是二维图像水平与垂直方向比值，(u0,v0)是摄像机光心在图像平面上的投影坐标，λ为参数。3.根据权利要求1-2中任一项所述的融合方法，所述步骤S2场景重建包括：将二维图像坐标反推三维世界坐标，从而恢复三维场景；其中对于多幅图像的配准，首先采用SIFT算子方法提取出特征点，然后利用外极线约束剔除局外点，最后利用互相关匹配公式进行对应点计算。4.根据权利要求1所述的融合方法，所述步骤3)的场景融合包括：S31.初始化融合引擎：所述融合引擎包括虚拟场景管理、真实场景管理和融合计算三个模块，还包括将所述虚拟场景生成引擎生成的虚拟图像叠加到真实图像的应用软件；所述虚拟场景管理模块用于生成虚拟摄像机和虚拟目标物；S32.根据所述步骤S1的摄像机标定结果，设定虚拟摄像机的参数；根据来自步骤S2的设定数据，初始化虚拟场景中需要设置的目标物；S33.建立t时刻的虚拟场景...

【专利技术属性】
技术研发人员：王宇舟，
申请(专利权)人：初速度苏州科技有限公司，
类型：发明
国别省市：江苏,32