一种光学镜头和热成像镜头的双镜头图像像素点匹配方法组成比例

一种光学镜头和热成像镜头的双镜头图像像素点匹配方法，步骤包括：矫正热成像镜头以及光学镜头的畸变；固定光学镜头和热成像镜头，变换标定板的位置获得到相应位置下的光学镜头和热成像镜头得到图像之间的仿射变换矩阵；对仿射变换矩阵中的每个元素进行最小二乘法拟合，得到在各个位置下的图片像素对应的仿射变换矩阵。使用本方案，可以有效解决了在行人识别以及体温检测时的位置不匹配问题，保证行人识别准确以及体表温度的测量准确度以及效率。

【技术实现步骤摘要】
一种光学镜头和热成像镜头的双镜头图像像素点匹配方法
本专利技术涉及多种图像像素点匹配方法，特别涉及一种一个是光学镜头，一个是热成像镜头的图像像素点匹配方法。
技术介绍
现代的行人检测方法不仅要获得行人的位置信息，更重要的是获得行人的体表温度，来为整个疫情防控系统提供技术支持。但是，传统使用单目热成像摄像头来检测行人温度，往往就会导致体温检测不准确，检测效果不佳。若采用体温枪和光学镜头的行人检测，又会使检测体温效率降低，给交通带来极大的压力。采用摄像机获取的可见光以及红外图像信息，并根据图像信息得到被检目标的温度信息，这个过程所用到的技术较为成熟。但光学镜头与红外镜头的像素点匹配是技术也是技术要点。原始图像是终端设备(如计算机等)处理数据的来源。如果原始图像信息较为准确，则处理过程所需系统资源较少，结果也更容易做到准确。
技术实现思路
为了提高获取准确的原始图像信息，本技术方案提出一种光学镜头和热成像镜头的双镜头图像像素点匹配方法，用于解决行人识别以及体温检测时的位置不匹配问题，具体为：一种光学镜头和热成像镜头的双镜头图像像素点匹配方法，步骤包括：1)取相机和棋盘标定板，并固定二者的相对位置；相机分别采用光学镜头和热成像镜头拍摄棋盘标定板，分别记录棋盘标定板中的各个黑格中心点的位置；得到热成像镜头的内参矩阵，采用热成像镜头的内参矩阵矫正热成像镜头的畸变；矫正的方法包括步骤：1.1)将源图像像素坐标系通过内参矩阵转化为相机坐标系，通过畸变系数矫正图像的相机坐标；1.2)矫正后的相机坐标系通过内参矩阵转化为图像像素坐标系，并根据源图像坐标的像素赋值给新的图像坐标；2)相机采用光学镜头拍摄棋盘标定板，记录棋盘标定板的角点位置；得到光学镜头的内参矩阵，采用光学镜头的内参矩阵矫正光学镜头的畸变；矫正的方法与步骤1.1)～1.2)相同；3)固定光学镜头和热成像镜头；对处于位置d的棋盘标定板，依次对每一个电阻丝进行通电，获得得到该位置下的各个黑格中心点的光学坐标和红外坐标，得到仿射变换矩阵G；4)变换棋盘的位置分别为d1、d2，...dn，采用步骤3)的方法，获得到相应位置下的光学镜头和热成像镜头得到图像之间的仿射变换矩阵G1、G2，...Gn；5)对步骤4)得到的仿射变换矩阵中的每个元素进行最小二乘法拟合，得到在各个位置下的图片像素对应的仿射变换矩阵G′。本方法可以应用于双目获取行人体温信息，原理为：传统的测温枪及测温门方案覆盖范围有限且需专人值守，效率较低。使用光学镜头+红外镜头的部署方式可实现大范围多目标检测，通过光学镜头可检测出覆盖范围内人员目标及需测温位置(如额头)，通过红外镜头可得到覆盖范围内物体温度信息，通过光学镜头图像及红外镜头图像的像素点匹配可得到每个人员目标的体温。但光学镜头与红外镜头的像素点匹配是技术难点。本专利技术提出的光学镜头与红外镜头的标定及像素点匹配方法解决了这一技术难点，光学镜头图像及红外镜头图像可通过仿射变换矩阵G′进行匹配。上述匹配，结合部署方案可实现宽度为5米以上大范围多目标精准测温。附图说明图1是本方法的流程示意图；图2是应用本方法的检测系统的部署示意图；图3是检测系统的摄像机安装高度H计算示意图；图4是检测系统的摄像机覆盖宽度W计算示意图；图5是标定辅助设备示意图。具体实施方式下面以应用本方法的某行人体温精准检测系统为例，对本专利技术的技术方案进行说明。本例中：参考图1，本光学镜头和热成像镜头的双镜头图像像素点匹配方法的应用步骤包括：1)取相机和棋盘标定板，并固定二者的相对位置；相机分别采用光学镜头和热成像镜头拍摄棋盘标定板，分别记录棋盘标定板中的各个黑格中心点的位置；得到热成像镜头的内参矩阵K1，采用内参矩阵K1矫正热成像镜头的畸变；图像的畸变包括：径向畸变和切向畸变。径向畸变是因为透镜本身的工艺问题，切向畸变是由于安装问题带来的。矫正的过程分为两步：1、将源图像像素坐标系通过内参矩阵转化为相机坐标系，通过畸变系数矫正图像的相机坐标；2、矫正后的相机坐标系通过内参矩阵转化为图像像素坐标系，并根据源图像坐标的像素赋值给新的图像坐标。具体方法：内参矩阵为：已知摄像头的焦距为f(单位：毫米),像片的尺寸大小为m×n(单位：像素)，传感器尺寸为i×j(单位：微米)，像素大小为p×p。由上面已知条件可求得内参矩阵如下：通常倾斜参数β＝1即内参矩阵可理解为矩阵内各值只与相机内部参数有关，且不随物体位置变化而变化。fx,fy为表示焦距的参数(焦距就是真空与投影屏幕的距离，类似于人眼和视网膜，焦距的度量是针对像素的)，代表每个像素在图像平面x和y方向上的物理尺寸。U0,v0代表的是图像坐标系原点在像素坐标系中的坐标，所以为m/2，n/2。若图像像素坐标系下有无畸变坐标(u,v)，经过经向畸变和切向畸变后落在了uOv坐标系的(ud，vd)上有：对于畸变有：径向畸变：切向畸变：x’,y’是一个像素值在图像坐标系中归一化坐标，u,v是无畸变坐标。那畸变位置坐标为径向畸变坐标和切向畸变坐标的组合。即ud＝u径‘+u切‘，vd＝v径‘+v切‘其中u径‘＝u‘＝u(1+k1r2+k2r4+k3r6)，u切‘＝v‘＝v(1+k1r2+k2r4+k3r6)K1,k2,k3,p1,p2是畸变参数，K1,k2,k3是径向畸变参数，p1,p是切向畸变参数。r2＝x2+y22)相机采用光学镜头拍摄棋盘标定板，记录棋盘标定板的角点位置；得到光学镜头的内参矩阵，采用内参矩阵矫正光学镜头的畸变；3)基于步骤1)和2)，采用标定板移位装置；固定光学镜头和热成像镜头；对处于位置d的棋盘标定板，依次对每一个电阻丝进行通电，获得得到该位置下的各个黑格中心点的光学坐标和红外坐标，得到仿射变换矩阵G；由光学坐标和红外坐标得到仿射变换矩阵G的过程为：记光学坐标(x,y)，红外坐标(m,n)；则光学镜头到红外镜头图像的成像经历的平移和翻转：其中A代表旋转矩阵，B代表平移矩阵，例如，若图片旋转θ，则A为当图片平移(x,y)时，则B为仿射变换的方法为：将其转化为齐次坐标矩阵，存在唯一解此方程组有6个未知数，所以需要至少6个方程(3个方程组)，即需要至少3个点在光学和红外镜头的坐标。4)变换棋盘的位置分别为d1、d2，...dn，获得到相应位置下的两个镜头图像之间的仿射变换矩阵G1、G2，...Gn；5)对步骤4)得到的仿射变换矩阵中的每个元素进行最小二乘法拟合(无约束条件)，得到在各个位置下的图片像素对应本文档来自技高网...

【技术保护点】
1.一种光学镜头和热成像镜头的双镜头图像像素点匹配方法，步骤包括：/n1)取相机和棋盘标定板，并固定二者的相对位置；/n相机分别采用光学镜头和热成像镜头拍摄棋盘标定板，分别记录棋盘标定板中的各个黑格中心点的位置；得到热成像镜头的内参矩阵，采用热成像镜头的内参矩阵矫正热成像镜头的畸变；矫正的方法包括步骤：/n1.1)将源图像像素坐标系通过内参矩阵转化为相机坐标系，通过畸变系数矫正图像的相机坐标；/n1.2)矫正后的相机坐标系通过内参矩阵转化为图像像素坐标系，并根据源图像坐标的像素赋值给新的图像坐标；/n2)相机采用光学镜头拍摄棋盘标定板，记录棋盘标定板的角点位置；得到光学镜头的内参矩阵，采用光学镜头的内参矩阵矫正光学镜头的畸变；/n矫正的方法与步骤1.1)～1.2)相同；/n3)固定光学镜头和热成像镜头；对处于位置d的棋盘标定板，依次对每一个电阻丝进行通电，获得得到该位置下的各个黑格中心点的光学坐标和红外坐标，得到仿射变换矩阵G；/n4)变换棋盘的位置分别为d

【技术特征摘要】
1.一种光学镜头和热成像镜头的双镜头图像像素点匹配方法，步骤包括：
1)取相机和棋盘标定板，并固定二者的相对位置；
相机分别采用光学镜头和热成像镜头拍摄棋盘标定板，分别记录棋盘标定板中的各个黑格中心点的位置；得到热成像镜头的内参矩阵，采用热成像镜头的内参矩阵矫正热成像镜头的畸变；矫正的方法包括步骤：
1.1)将源图像像素坐标系通过内参矩阵转化为相机坐标系，通过畸变系数矫正图像的相机坐标；
1.2)矫正后的相机坐标系通过内参矩阵转化为图像像素坐标系，并根据源图像坐标的像素赋值给新的图像坐标；
2)相机采用光学镜头拍摄棋盘标定板，记录棋盘标定板的角点位置；得到光学镜头的内参矩阵，采用光学镜头的内参矩阵矫正光学镜头的畸变；
矫正的方法与步骤1.1)～1.2)相同；
3)固定光学镜头和热成像镜头；对处于位置d的棋盘标定板，依次对每一个电阻丝进行通电，获得得到该位置下的各个黑格中心点的光学坐标和红外坐标，得到仿射变换矩阵G；
4)变换棋盘的位置分别为d1、d2，...dn，采用步骤3)的方法，获得到相应位置下的光学镜头和热成像镜头得到图像之间的仿射变换矩阵G1、G2，...Gn；
5)对步骤4)得到的仿射变换矩阵中的每个元素进行最小二乘法拟合，得到在各个位置下的图片像素对应...

【专利技术属性】
技术研发人员：田青，张华，姚锐琳，侯卫民，
申请(专利权)人：江苏集萃未来城市应用技术研究所有限公司，
类型：发明
国别省市：江苏;32