一种3D图像拼接方法及装置制造方法及图纸

本发明专利技术涉及图像拼接技术领域，尤其涉及一种3D图像拼接方法及装置。该方法包括：获取目标监测区域的已布点摄像机拍摄的待拼接图像，拼接图像两两之间具有设定比例的重叠区域；确定待拼接图像中的图像特征点的位置对应关系；利用图像特征点的全局方位信息确定几何投影平面；根据图像特征点的位置对应关系，将所有待拼接图像投影到几何投影平面，确定全局图架构；根据图像特征点的全局坐标进行图像融合，得到三维全景图像。本发明专利技术的该3D图像拼接方法及装置，能够快速进行目标监测区域的图像拼接实现3D场景展示，有效克服了现有的逆向三维建模工作量大、周期长、模型难以复用的缺点，使得本发明专利技术方案，更能满足用户进行三维场景展现的实际需求。

【技术实现步骤摘要】
一种3D图像拼接方法及装置
本专利技术涉及图像拼接
，具体而言，涉及一种3D图像拼接方法及装置。
技术介绍
目前，多利用摄像设备对重点场所、重点设备进行监控。采用摄像设备监控获取的 图像均为二维图像，且每台监控设备仅能获取监控场所或设备的部分图像，不便于用户对 监控场所或设备进行全景监测。例如，在变电站的监控中，布置了数十台摄像机，分别监控 不同的物理和场景对象，如何进行基于三维全景可视化的变电站场景展现与监测是电力用 户的业务需求之一。 现有的三维全景可视化场景展现与监测的方法主要是三维巡视、仿真培训和设备 资产管理等，在实现过程中多采用逆向三维建模手段，包括：对已有的监测设备或场景的实 体模型进行拍照或扫描，得到监测模型图像；在三维环境中，基于监测模型图像建立三维数 字模型；将获取的监测场景的监测图像投影到三维数字模型中，进行三维全景可视化展现。 上述的方法虽然能够实现三维场景的可视化，但因为监测场所或设备的不同，例 如每个变电站都有不同类型的设备和独特的空间分布特征，若都采用上述三维逆向建模的 方法进行三维场景的展现，需要对每个设备、场所进行建模，导致三维逆向建模工作量大、 周期长、模型难以复用，不能满足用户三维场景展现的实际需求。
技术实现思路
本专利技术的目的在于提供一种3D图像拼接方法及装置，以解决上述的问题。 在本专利技术的实施例中提供了一种3D图像拼接方法，包括：获取目标监测区域的已 布点摄像机拍摄的待拼接图像，所述待拼接图像两两之间具有设定比例的重叠区域；确定 所述待拼接图像中的图像特征点的位置对应关系；利用所述图像特征点的全局方位信息确 定几何投影平面；根据所述图像特征点的所述位置对应关系，将所有所述待拼接图像投影 到所述几何投影平面，确定全局图架构；根据所述图像特征点的全局坐标进行图像融合，得 到三维全景图像。 优选地，该方法还包括：获取所述目标监测区域的已布点摄像机的摄像机信息，所 述摄像机信息包括：摄像机个数、摄像机类型及摄像机物理参数。 优选地，所述确定所述待拼接图像中的图像特征点的位置对应关系，包括：基于尺 度不变特征转换SIFT算法提取所述待拼接图像中的图像特征点；采用特征点自适应匹配 方法对所述图像特征点进行匹配，得到特征点对；基于外极线约束几何模型和摄像机成像 原理计算所述特征点对之间的位置关系。 优选地，所述采用特征点自适应匹配方法对所述图像特征点进行匹配，得到特征 点对，包括：根据所述图像特征点的横坐标或纵坐标把所述重叠区域均匀分布；两两计算 所述图像特征点的特征向量的欧氏距离，将所述欧氏距离小于设定的阈值的特征点匹配加 入特征点对。 优选地，所述基于外极线约束几何模型和摄像机成像原理计算特征点对之间的位 置关系，包括：基于RANSAC算法估算关于特征点对的基本矩阵；通过外极线约束几何模型 约束所述基本矩阵的估算结果，并联立摄像机成像原理，计算所述图像特征点对的位置关 系。 优选地，所述利用所述图像特征点的全局方位信息确定几何投影平面，包括：基于 图像特征点到几何投影平面距离最小的原则，采用最小二乘法拟合所述几何投影平面。 优选地，所述根据所述图像特征点的全局坐标进行图像融合，得到三维全景图像， 包括：采用柱面正射投影，将所述待拼接图像投影到柱面全局坐标中，基于所述图像特征点 与柱面之间的映射关系进行图像融合。 本专利技术实施例还提供了一种3D图像拼接装置，包括：图像获取装置，用于获取目 标监测区域的已布点摄像机拍摄的待拼接图像，所述拼接图像两两之间具有设定比例的重 叠区域；位置关系确定模块，用于确定所述待拼接图像中的图像特征点的位置对应关系； 投影模块，用于利用所述图像特征点的全局方位信息确定几何投影平面；根据所述图像特 征点的所述位置对应关系，将所有所述待拼接图像投影到所述几何投影平面，确定全局图 架构；图像融合模块，用于根据所述图像特征点的全局坐标进行图像融合，得到三维全景图 像。 优选地，所述位置关系确定模块，包括：图像特征点提取子模块，用于基于尺度不 变特征转换SIFT算法提取所述待拼接图像中的图像特征点；匹配子模块，用于采用特征点 自适应匹配方法对所述图像特征点进行匹配，得到特征点对；位置关系确定子模块，用于基 于外极线约束几何模型和摄像机成像原理计算所述特征点对之间的位置关系。 本专利技术实施例的3D图像拼接方法及装置，利用已布点摄像机获取的图像作为待 拼接图像，通过待拼接图像中的图像特征点的位置对应关系在几何投影平面中进行投影、 拼接，利用该方法无需预先建立目标监测区域的模型，能够快速进行目标监测区域的图像 拼接实现3D场景展示，有效克服了现有的逆向三维建模工作量大、周期长、模型难以复用 的缺点，使得本专利技术的方法及装置，更能满足用户进行三维场景展现的实际需求。 另外，本方法中，为了达到真实展现场景或设备的目的，基于图像特征点全局框架 图的正投影方法，不会出现累积误差所造成图像失真变形的情况，可以达到真实模拟场景 的需求。 【附图说明】 图1示出了本专利技术实施例中3D图像拼接方法的一种流程图； 图2示出了本专利技术实施例中3D图像拼接方法的另一种流程图； 图3示出了本专利技术实施例中外极线约束几何模型； 图4示出了本专利技术实施例中3D图像拼接装置的结构示意图。 【具体实施方式】 下面通过具体的实施例子并结合附图对本专利技术做进一步的详细描述。 本专利技术基于目标监测区域（例如变电站）三维可视化的应用需求，研究与目标监 测区域视频监控系统相结合的三维全景可视化方法，提出基于摄像机粗精度监控方位实时 监控图像获取，运用自适应图像特征点匹配技术计算匹配点对，估算匹配点基本矩阵，在此 基础上基于外极线约束和摄像机成像原理计算匹配点对之间的位置关系；利用特征点对应 关系进行图像的正射投影，将待拼接图像投影到全局图中，对图像进行融合，从而构建具 有真实场景的实时三维全景图像。 基于上述思想，本专利技术实施例提供了一种3D图像拼接方法，如图1所示，主要处理 步骤包括： 步骤Sll :获取目标监测区域的已布点摄像机拍摄的待拼接图像，待拼接图像两 两之间具有设定比例的重叠区域； 步骤S12:确定待拼接图像中的图像特征点的位置对应关系； 步骤S13:利用图像特征点的全局方位信息确定几何投影平面； 步骤S14:根据图像特征点的位置对应关系，将所有待拼接图像投影到几何投影 平面，确定全局图架构； 步骤S15:根据图像特征点的全局坐标进行图像融合，得到三维全景图像。 利用该方法无需预先建立目标监测区域的模型，能够快速进行目标监测区域的图 像拼接实现3D场景展示，有效克服了现有的逆向三维建模工作量大、周期长、模型难以复 用的缺点，使得本专利技术的方法，更能满足用户进行三维场景展现的实际需求。 另外，本方法中，为了达到真实展现场景或设备的目的，基于图像特征点全局框架 图的正投影方法，不会出现累积误差所造成图像失真变形的情况，可以达到真实模拟场景 的需求。 如图2所示，本专利技术还提供了一种基于上述思想的优选实施方法，该方法主要包 括： 步骤S21:实本文档来自技高网...

【技术保护点】
一种3D图像拼接方法，其特征在于，包括：获取目标监测区域的已布点摄像机拍摄的待拼接图像，所述待拼接图像两两之间具有设定比例的重叠区域；确定所述待拼接图像中的图像特征点的位置对应关系；利用所述图像特征点的全局方位信息确定几何投影平面；根据所述图像特征点的所述位置对应关系，将所有所述待拼接图像投影到所述几何投影平面，确定全局图架构；根据所述图像特征点的全局坐标进行图像融合，得到三维全景图像。

【技术特征摘要】
1. 一种3D图像拼接方法，其特征在于，包括： 获取目标监测区域的已布点摄像机拍摄的待拼接图像，所述待拼接图像两两之间具有 设定比例的重叠区域； 确定所述待拼接图像中的图像特征点的位置对应关系； 利用所述图像特征点的全局方位信息确定几何投影平面； 根据所述图像特征点的所述位置对应关系，将所有所述待拼接图像投影到所述几何投 影平面，确定全局图架构； 根据所述图像特征点的全局坐标进行图像融合，得到三维全景图像。2. 根据权利要求1所述的3D图像拼接方法，其特征在于，该方法还包括：获取所述目 标监测区域的已布点摄像机的摄像机信息，所述摄像机信息包括：摄像机个数、摄像机类型 及摄像机物理参数。3. 根据权利要求1所述的3D图像拼接方法，其特征在于，所述确定所述待拼接图像中 的图像特征点的位置对应关系，包括： 基于尺度不变特征转换SIFT算法提取所述待拼接图像中的图像特征点； 采用特征点自适应匹配方法对所述图像特征点进行匹配，得到特征点对； 基于外极线约束几何模型和摄像机成像原理计算所述特征点对之间的位置关系。4. 根据权利要求3所述的3D图像拼接方法，其特征在于，所述采用特征点自适应匹配 方法对所述图像特征点进行匹配，得到特征点对，包括： 根据所述图像特征点的横坐标或纵坐标把所述重叠区域均匀分布； 两两计算所述图像特征点的特征向量的欧氏距离，将所述欧氏距离小于设定的阈值的 图像特征点匹配加入特征点对。5. 根据权利要求3所述的3D图像拼接方法，其特征在于，所述基于外极线约束几何模 型和摄像机成像原理计算特征点对之间的位置关系，包括： 基于RANSAC算法估算关于特征点对的基本矩...

【专利技术属性】
技术研发人员：胡娟，颜江，冯宇，
申请(专利权)人：四川华雁信息产业股份有限公司，
类型：发明
国别省市：四川;51