图像融合方法、装置及电子设备制造方法及图纸

本发明专利技术涉及图像处理领域，具体而言，涉及一种图像融合方法、装置及电子设备。首先通过获得第一图像和第二图像，其中第一图像由第一图像采集系统采集得到，第二图像由第二图像采集系统采集得到，求取第一图像采集系统与第二图像采集系统之间的几何偏移量，然后获取第一图像采集系统对应的预先设定的第一参考视场角和第二图像采集系统对应的预先设定的第二参考视场角；其次，根据第一参考视场角、第二参考视场角以及几何偏移量计算第一图像与第二图像之间的单应矩阵，根据单应矩阵对第一图像和第二图像进行配准，得到配准图像对，最后将配准图像对进行像素融合，得到融合图像。本发明专利技术提供的图像融合方法图像融合效果好。

Image Fusion Method, Device and Electronic Equipment

The invention relates to the field of image processing, in particular to an image fusion method, device and electronic device. Firstly, the first image is acquired by the first image acquisition system and the second image is acquired by the second image acquisition system. The geometric offset between the first image acquisition system and the second image acquisition system is calculated. Then, the preset first reference field angle and the second image acquisition corresponding to the first image acquisition system are acquired. Secondly, the homography matrix between the first image and the second image is calculated according to the first reference field angle, the second reference field angle and the geometric offset. According to the homography matrix, the first image and the second image are registered, and the registration image pairs are obtained. Finally, the registration image pairs are fused with pixels to obtain the fusion image. The image fusion method provided by the invention has good image fusion effect.

【技术实现步骤摘要】
图像融合方法、装置及电子设备
本专利技术图像处理领域，具体而言，涉及一种图像融合方法、装置及电子设备。
技术介绍
近年来随着无人机技术的发展，无人机因其高效，灵活，低成本等特性，已被广泛应用于勘探，侦察，应急，救灾等各个领域。而机载光电吊舱是无人机勘探、侦察等任务中重要的任务设备。机载光电吊舱正由单传感器成像系统向多传感器成像系统发展，采用多传感器成像系统的图像信息融合技术可以有效扩展侦察范围、场景细节信息，提高无人机图像侦察、目标识别跟踪的性能。典型的多传感器光电吊舱成像系统是由可见光传感器成像系统和红外传感器成像系统构成的两路成像系统，一路用于采集可见光图像，另一路用于采集红外图像。可见光图像具有丰富的细节和色彩信息，而且具有更高的的分辨率，但是容易受天气及时间等条件的影响。红外图像的分辨率低、细节不足，但是可以全天侯工作，抗干扰能力强。机载光电吊舱图像信息融合技术就是将光电吊舱不同传感器成像系统采集的不同视角的图像信息进行融合，克服单一传感器图像信息的不足，便于机载吊舱全天候侦察。目前，现有技术中的图像机载光电吊舱图像信息融合技术，是基于机载光电吊舱成像系统的光轴校准，然后对机本文档来自技高网...

【技术保护点】
1.一种图像融合方法，其特征在于，所述图像融合方法包括：获得第一图像和第二图像，其中所述第一图像由第一图像采集系统在第一当前视场角采集得到，所述第二图像由第二图像采集系统在第二当前视场角采集得到；求取所述第一图像采集系统与所述第二图像采集系统之间的几何偏移量；获取所述第一图像采集系统对应的预先设定的第一参考视场角和所述第二图像采集系统对应的预先设定的第二参考视场角；根据所述第一参考视场角、所述第二参考视场角以及所述几何偏移量计算所述第一图像与所述第二图像之间的单应矩阵；根据所述单应矩阵对所述第一图像和所述第二图像进行配准，得到配准图像对；将所述配准图像对进行像素融合，得到融合图像。

【技术特征摘要】
1.一种图像融合方法，其特征在于，所述图像融合方法包括：获得第一图像和第二图像，其中所述第一图像由第一图像采集系统在第一当前视场角采集得到，所述第二图像由第二图像采集系统在第二当前视场角采集得到；求取所述第一图像采集系统与所述第二图像采集系统之间的几何偏移量；获取所述第一图像采集系统对应的预先设定的第一参考视场角和所述第二图像采集系统对应的预先设定的第二参考视场角；根据所述第一参考视场角、所述第二参考视场角以及所述几何偏移量计算所述第一图像与所述第二图像之间的单应矩阵；根据所述单应矩阵对所述第一图像和所述第二图像进行配准，得到配准图像对；将所述配准图像对进行像素融合，得到融合图像。2.根据权利要求1所述的图像融合方法，其特征在于，求取所述第一图像采集系统与所述第二图像采集系统之间的几何偏移量的步骤，包括：获取所述第一图像采集系统的光心到所述第二图像采集系统的光心之间在景深方向的距离；分别获取两组不同物距下，参考目标在所述第一图像中的位置到所述参考目标在所述第二图像中的位置的偏移量，得到两组偏移量；根据所述两组偏移量以及所述第一图像采集系统的光心到所述第二图像采集系统的光心之间在景深方向的距离，计算得到所述第一图像采集系统与所述第二图像采集系统之间的几何偏移量。3.根据权利要求1所述的图像融合方法，其特征在于，所述根据所述第一参考视场角、所述第二参考视场角以及所述几何偏移量计算所述第一图像与所述第二图像之间的单应矩阵的步骤，包括：获取所述第一图像对应的第一物距以及所述第一图像的第一分辨率参数和所述第二图像的第二分辨率参数；根据所述第一参考视场角计算得到所述第一图像采集系统的第一参考方向的视场角，根据所述第二参考视场角计算得到所述第二图像采集系统的第二参考方向的视场角；获取所述第一图像采集系统在预先设定的第一参考视场角下采集的第一参考图像和所述第二图像采集系统在预先设定的第二参考视场角下采集的第二参考图像；根据坐标变换关系，由所述第一分辨率参数、所述第二分辨率参数、所述第一物距、所述第一参考方向的视场角和所述第二参考方向的视场角计算得到所述第一参考图像与所述第二参考图像之间的参考单应矩阵；获取所述第一图像采集系统的第一当前视场角和所述第二图像采集系统对应的第二当前视场角；根据所述第一当前视场角计算得到所述第一图像采集系统的第一当前方向的视场角，根据所述第二当前视场角计算得到所述第二图像采集系统的第二当前方向的视场角；根据成像原理，由所述第一分辨率参数、所述第二分辨率参数、所述第一当前方向的视场角计算得到所述第一图像到与其对应的第一参考图像之间的第一单应矩阵；由所述第一分辨率参数、所述第二分辨率参数、所述第二当前方向的视场角计算得到所述第二图像到与其对应的第二参考图像之间的第二单应矩阵；根据矩阵变换关系，通过所述参考单应矩阵、所述第一单应矩阵和所述第二单应矩阵计算得到所述第一图像与所述第二图像之间的单应矩阵。4.根据权利要求1-3任一项所述的图像融合方法，其特征在于，所述配准图像对包括配准后的第一图像和配准后的第二图像；所述根据所述单应矩阵对所述第一图像和所述第二图像进行配准，得到配准图像对的步骤，包括：根据成像原理，通过所述单应矩阵建立所述第一图像与所述第二图像的配准关系；所述第一图像中的第一像素点通过所述配准关系找到该第一像素点在所述第二图像中对应的第二像素点；所有所述第一像素点构成配准后的第一图像，所有所述第二像素点构成配准后的第二图像。5.根据权利要求4所述的图像融合方法，其特征在于，将所述配准图像对进行像素融合，得到融合图像的步骤，包括：将所述配准后的第二图像的每一个像素值进行归一化，以归一化后的像素值作为融合权重；将所述配准后的第一图像的每一个第一像素点的像素值和该第一像素点在所述配准后的第二图像中对应的第二像素点的像素值按照所述融合权重进行融合，得到融合图像。6.一种图像融合装置，其特征在于，所述图像融合装置包括：获得图像模块，用于获得第一图像和第二图像，其中所述第一图像由第一图像采集系统在第一当前视场角采集得到，所述第二图像由第二图像采集系统在第二当前视场角采集得到；求取几何偏移量模块，用于求取所述第一图像采集系统与所述第二图...

【专利技术属性】
技术研发人员：孙婷婷，刘述超，任斌，
申请(专利权)人：成都纵横自动化技术股份有限公司，
类型：发明
国别省市：四川,51