图像处理方法及装置制造方法及图纸

本发明专利技术是关于一种图像处理方法及装置，属于图像处理领域。所述方法包括：获取监控场景的第一图像和第二图像，第一图像包括n个第一区域，n≥2，第二图像包括与n个第一区域一一对应的n个第二区域，当第一图像在监控画面的位置和第二图像在监控画面的位置不满足目标条件时，在监控画面中对第二图像的位置进行调整，使得第一图像的位置与调整后的第二图像的位置满足目标条件，之后，基于第一图像和调整后的第二图像融合生成彩色图像，第一图像和第二图像中一个为红外图像，另一个为可见光图像。本申请解决了相关技术中彩色图像的清晰度较低，质量较差的问题，实现了提高彩色图像的清晰度，提高彩色图像的质量的效果，用于生成彩色图像。

Image processing method and device

【技术实现步骤摘要】
图像处理方法及装置
本专利技术涉及图像处理领域，特别涉及一种图像处理方法及装置。
技术介绍
在图像处理领域中，色彩和亮度是视频图像中的两个重要元素，色彩和亮度常常互相干扰最终影响画面效果。相关技术中提供一种摄像机，其通过模仿人眼视网膜成像原理来解决色彩和亮度互相干扰的问题，该摄像机采用双传感器(英文：sensor)架构：可见光传感器和红外传感器，其中，可见光传感器用于模仿视网膜中的锥状细胞感知色彩信息，得到可见光图像，红外传感器用于模仿视网膜中的杆状细胞感知亮度细节，得到红外图像，色彩信息和亮度细节互不干扰，最终，摄像机基于可见光图像和红外图像生成用户可见的彩色图像。在实现本专利技术的过程中，专利技术人发现相关技术至少存在以下问题：当可见光图像和红外图像中具有相同图像特征的区域的位置的偏差较大时，由于对应像素点的位置偏差较大，所以摄像机基于两个图像生成的彩色图像的清晰度较低，质量较差。
技术实现思路
本专利技术实施例提供了一种图像处理方法及装置，可以解决相关技术中可见光图像和红外图像中具有相同图像特征的区域的位置的偏差较大，对应像素点的位置偏差较大，生成的彩色图像的清晰度较低，质量较差的问题。所述技术方案如下：根据本专利技术实施例的第一方面，提供一种图像处理方法，所述方法包括：获取监控场景的第一图像和第二图像，所述第一图像包括n个第一区域，n≥2，所述第二图像包括与所述n个第一区域一一对应的n个第二区域，每个所述第一区域与对应的第二区域具有相同的图像特征，所述图像特征至少包括纹理特征、形状特征和空间关系特征中的一个，其中，所述第一图像和所述第二图像中一个为红外图像，另一个为可见光图像；当所述第一图像在监控画面的位置和所述第二图像在所述监控画面的位置不满足目标条件时，在所述监控画面中对所述第二图像的位置进行调整，使得所述第一图像的位置与调整后的第二图像的位置满足所述目标条件；基于所述第一图像和调整后的所述第二图像融合生成彩色图像，所述彩色图像中每个像素点的色彩信息是从所述可见光图像中得到的，所述每个像素点的亮度信息是从所述红外图像中得到的；其中，所述目标条件包括第一条件和第二条件中的至少一个，所述第一条件为：在预设坐标系中，任意一对区域的中心点的坐标的差值的绝对值小于第一预设偏离值，所述任意一对区域包括第一区域和对应的第二区域；所述第二条件为：所述第一图像相对于指定方向的第一偏转角与所述第二图像相对于所述指定方向的第二偏转角的差值的绝对值小于第二预设偏离值，所述第一偏转角为所述第一图像中任意两个第一区域的中心点的连线与所述指定方向之间的夹角，所述第二偏转角为所述第二图像中与所述两个第一区域对应的两个第二区域的中心点的连线与所述指定方向之间的夹角。可选的，所述预设坐标系为具有相互垂直的x轴和y轴的二维坐标系，所述第一预设偏离值包括x轴方向对应的预设偏离值和y轴方向对应的预设偏离值，在所述监控画面中对所述第二图像的位置进行调整之前，所述方法还包括：确定任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标；确定所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标分别在x轴方向上的差值的绝对值和在y轴方向上的差值的绝对值；当所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标在x轴方向上的差值的绝对值不小于x轴方向对应的预设偏离值，且所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标在y轴方向上的差值的绝对值不小于y轴方向对应的预设偏离值时，确定所述第一图像的位置和所述第二图像的位置不满足所述第一条件。可选的，所述在所述监控画面中对所述第二图像的位置进行调整，包括：当位置调整精度小于预设精度时，在所述监控画面中对所述第二图像的位置进行多次调整，并记录调整次数；当记录的调整次数未达到预设调整次数，且所述第一图像的位置与调整后的第二图像的位置满足所述目标条件时，停止执行调整操作，并确定调整操作执行成功。可选的，所述确定第一区域的中心点的坐标，包括：对所述第一图像进行平滑去噪；检测处理后的第一图像中的边缘信息；基于所述边缘信息和所述第一区域对应的参考图形，得到所述第一区域，所述参考图形具有指定的尺寸和形状；采用最小二乘法对得到的所述第一区域进行拟合，以得到所述第一区域的中心点的坐标。可选的，所述第一图像为可见光图像，所述第二图像为红外图像，在所述获取监控场景的第一图像和第二图像之后，所述方法还包括：记录所述可见光图像中每个所述第一区域的像素点的色彩信息和所述红外图像中每个所述第二区域的像素点的亮度信息；将所述可见光图像和所述红外图像分别转换为灰度图像；将所述可见光图像对应的灰度图像在所述监控画面中的位置确定为所述可见光图像的位置；将所述红外图像对应的灰度图像在所述监控画面中的位置确定为所述红外图像的位置；所述基于所述第一图像和调整后的所述第二图像融合生成彩色图像，包括：获取预先记录的所述可见光图像中每个所述第一区域的像素点的色彩信息，以及所述红外图像中每个所述第二区域的像素点的亮度信息；对获取的对应像素点的色彩信息和亮度信息进行融合处理，以得到所述彩色图像。根据本专利技术实施例的第二方面，提供一种图像处理装置，所述装置包括：获取模块，用于获取监控场景的第一图像和第二图像，所述第一图像包括n个第一区域，n≥2，所述第二图像包括与所述n个第一区域一一对应的n个第二区域，每个所述第一区域与对应的第二区域具有相同的图像特征，所述图像特征至少包括纹理特征、形状特征和空间关系特征中的一个，其中，所述第一图像和所述第二图像中一个为红外图像，另一个为可见光图像；调整模块，用于当所述第一图像在监控画面的位置和所述第二图像在所述监控画面的位置不满足目标条件时，在所述监控画面中对所述第二图像的位置进行调整，使得所述第一图像的位置与调整后的第二图像的位置满足所述目标条件；处理模块，用于基于所述第一图像和调整后的所述第二图像融合生成彩色图像，所述彩色图像中每个像素点的色彩信息是从所述可见光图像中得到的，所述每个像素点的亮度信息是从所述红外图像中得到的；其中，所述目标条件包括第一条件和第二条件中的至少一个，所述第一条件为：在预设坐标系中，任意一对区域的中心点的坐标的差值的绝对值小于第一预设偏离值，所述任意一对区域包括第一区域和对应的第二区域；所述第二条件为：所述第一图像相对于指定方向的第一偏转角与所述第二图像相对于所述指定方向的第二偏转角的差值的绝对值小于第二预设偏离值，所述第一偏转角为所述第一图像中任意两个第一区域的中心点的连线与所述指定方向之间的夹角，所述第二偏转角为所述第二图像中与所述两个第一区域对应的两个第二区域的中心点的连线与所述指定方向之间的夹角。可选的，所述预设坐标系为具有相互垂直的x轴和y轴的二维坐标系，所述第一预设偏离值包括x轴方向对应的预设偏离值和y轴方向本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，所述方法包括：/n获取监控场景的第一图像和第二图像，所述第一图像包括n个第一区域，n≥2，所述第二图像包括与所述n个第一区域一一对应的n个第二区域，每个所述第一区域与对应的第二区域具有相同的图像特征，所述图像特征至少包括纹理特征、形状特征和空间关系特征中的一个，其中，所述第一图像和所述第二图像中一个为红外图像，另一个为可见光图像；/n当所述第一图像在监控画面的位置和所述第二图像在所述监控画面的位置不满足目标条件时，在所述监控画面中对所述第二图像的位置进行调整，使得所述第一图像的位置与调整后的第二图像的位置满足所述目标条件；/n基于所述第一图像和调整后的所述第二图像融合生成彩色图像，所述彩色图像中每个像素点的色彩信息是从所述可见光图像中得到的，所述每个像素点的亮度信息是从所述红外图像中得到的；/n其中，所述目标条件包括第一条件和第二条件中的至少一个，所述第一条件为：在预设坐标系中，任意一对区域的中心点的坐标的差值的绝对值小于第一预设偏离值，所述任意一对区域包括第一区域和对应的第二区域；所述第二条件为：所述第一图像相对于指定方向的第一偏转角与所述第二图像相对于所述指定方向的第二偏转角的差值的绝对值小于第二预设偏离值，所述第一偏转角为所述第一图像中任意两个第一区域的中心点的连线与所述指定方向之间的夹角，所述第二偏转角为所述第二图像中与所述两个第一区域对应的两个第二区域的中心点的连线与所述指定方向之间的夹角。/n...

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：
获取监控场景的第一图像和第二图像，所述第一图像包括n个第一区域，n≥2，所述第二图像包括与所述n个第一区域一一对应的n个第二区域，每个所述第一区域与对应的第二区域具有相同的图像特征，所述图像特征至少包括纹理特征、形状特征和空间关系特征中的一个，其中，所述第一图像和所述第二图像中一个为红外图像，另一个为可见光图像；
当所述第一图像在监控画面的位置和所述第二图像在所述监控画面的位置不满足目标条件时，在所述监控画面中对所述第二图像的位置进行调整，使得所述第一图像的位置与调整后的第二图像的位置满足所述目标条件；
基于所述第一图像和调整后的所述第二图像融合生成彩色图像，所述彩色图像中每个像素点的色彩信息是从所述可见光图像中得到的，所述每个像素点的亮度信息是从所述红外图像中得到的；
其中，所述目标条件包括第一条件和第二条件中的至少一个，所述第一条件为：在预设坐标系中，任意一对区域的中心点的坐标的差值的绝对值小于第一预设偏离值，所述任意一对区域包括第一区域和对应的第二区域；所述第二条件为：所述第一图像相对于指定方向的第一偏转角与所述第二图像相对于所述指定方向的第二偏转角的差值的绝对值小于第二预设偏离值，所述第一偏转角为所述第一图像中任意两个第一区域的中心点的连线与所述指定方向之间的夹角，所述第二偏转角为所述第二图像中与所述两个第一区域对应的两个第二区域的中心点的连线与所述指定方向之间的夹角。


2.根据权利要求1所述的方法，其特征在于，所述预设坐标系为具有相互垂直的x轴和y轴的二维坐标系，所述第一预设偏离值包括x轴方向对应的预设偏离值和y轴方向对应的预设偏离值，
在所述监控画面中对所述第二图像的位置进行调整之前，所述方法还包括：
确定任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标；
确定所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标分别在x轴方向上的差值的绝对值和在y轴方向上的差值的绝对值；
当所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标在x轴方向上的差值的绝对值不小于x轴方向对应的预设偏离值，且所述任一第一区域的中心点的坐标和对应的第二区域的中心点的坐标在y轴方向上的差值的绝对值不小于y轴方向对应的预设偏离值时，确定所述第一图像在监控画面的位置和所述第二图像在监控画面的位置不满足所述第一条件。


3.根据权利要求1所述的方法，其特征在于，所述在所述监控画面中对所述第二图像的位置进行调整，包括：
当位置调整精度小于预设精度时，在所述监控画面中对所述第二图像的位置进行多次调整，并记录调整次数；
当记录的调整次数未达到预设调整次数，且所述第一图像的位置与调整后的第二图像的位置满足所述目标条件时，停止执行调整操作，并确定调整操作执行成功。


4.根据权利要求2所述的方法，其特征在于，所述确定第一区域的中心点的坐标，包括：
对所述第一图像进行平滑去噪；
检测处理后的第一图像中的边缘信息；
基于所述边缘信息和所述第一区域对应的参考图形，得到所述第一区域，所述参考图形具有指定的尺寸和形状；
采用最小二乘法对得到的所述第一区域进行拟合，以得到所述第一区...

【专利技术属性】
技术研发人员：何萍，马伟民，尤灿，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：浙江;33