一种手指与车机无接触即可完成按键和功能触发的方法技术

本发明专利技术涉及图像识别技术领域，尤其为一种手指与车机无接触即可完成按键和功能触发的方法，包括如下步骤：步骤S1.1：深感摄像头捕捉屏幕上方的指尖悬停信息；步骤S1.2：当深感摄像头采集到指尖悬停信息时，将数据回传给服务器；步骤S1.3：服务器根据坐标变换算法以及空间测距法确认指尖悬停位置；步骤S1.4：指尖悬停后靠近车机屏幕，服务器根据指尖悬停位置进行判断及处理。本发明专利技术通过利用深感摄像头的坐标变换算法以及空间测距法实现无接触的情况下进行按键的点击和触发对应的功能，在车机中可以通过深感摄像头捕捉定位，与车机屏幕坐标相结合，再根据手指尖与深感摄像头的距离判断是否进行点击，以达到完成本次触发。实现了人员无接触操控，避免了病毒的接触式传播。避免了病毒的接触式传播。避免了病毒的接触式传播。

【技术实现步骤摘要】
一种手指与车机无接触即可完成按键和功能触发的方法


[0001]本专利技术涉及图像识别
，尤其是一种手指与车机无接触即可完成按键和功能触发的方法。

技术介绍

[0002]现处于疫情时期，需要做好自身安全防护，公共场合内如乘坐电梯时需要按下到达楼层，难免与他人共同接触控制面板，这种接触式传播，仍是当前亟待解决的痛点。
[0003]现有技术提出一种免接触智能交互的安全防疫电梯，包含语音识别交互系统、手势识别交互系统进行交互触发功能，但市面上的方案只是简单提供了如何能在不接触情况下完成一次功能的触发，可以通过语音控制，但当发出语音指令的人出现方言、口齿不清等问题时，语音识别系统则很难清楚识别目标楼层。

技术实现思路

[0004]本专利技术的目的是通过提出一种手指与车机无接触即可完成按键和功能触发的方法，以解决上述
技术介绍
中提出的缺陷。
[0005]本专利技术采用的技术方案如下：提供一种手指与车机无接触即可完成按键和功能触发的方法，包括如下步骤：步骤S1.1：深感摄像头捕捉屏幕上方的指尖悬停信息；步骤S1.2：当深感摄像头采集到指尖悬停信息时，将数据回传给服务器；步骤S1.3：服务器根据坐标变换算法以及空间测距法确认指尖悬停位置；步骤S1.4：指尖悬停后靠近车机屏幕，服务器根据指尖悬停位置进行判断及处理。
[0006]作为本专利技术的一种优选技术方案：所述步骤S1.1中，深感摄像头的捕捉起始点为屏幕左上角或屏幕左下角。
[0007]作为本专利技术的一种优选技术方案：所述步骤S1.3中，坐标变换算法具体包括二维平面坐标系的坐标与三维世界坐标系的坐标之间的转换，其中，二维平面坐标系的平面与三维世界坐标系的xoy平面相重合，设定三维世界坐标点，其中，X、Y、Z分别为点Q在三维世界坐标系X轴、Y轴、Z轴上的位置，为根据Q点坐标转换的转置矩阵，二维平面坐标点为，其中，分别为点q在二维平面坐标系X轴、Y轴上的位置，为根据q点坐标转换的转置矩阵，三维世界坐标点与二维平面坐标点q的映射关系满足：其中，s为坐标系变换尺度因子；、分别为二维平面坐标点q、三维世界平面坐
标点Q的增广矩阵；P为深感摄像头内参矩阵，构成内参矩阵，为旋转矩阵，为平移矩阵，深感摄像头内参矩阵P满足：其中，为光心坐标；、为焦距与像素横纵比的融合。
[0008]作为本专利技术的一种优选技术方案：所述两深感摄像头标定的过程中存在畸变，包括径向畸变和切向畸变，设定点为深感摄像头获取的点，为点经去畸变、矫正后得到的点，其关系为：其中，确定径向畸变，确定切向畸变。
[0009]作为本专利技术的一种优选技术方案：所述步骤S1.3中的空间测距法，根据车机内两深感摄像头的成像视差来确定指尖到深感摄像头的距离：其中，为成像平面最左侧点的横坐标，为成像平面最右侧点的横坐标，s为两深感摄像头成像视差；根据：得到：其中，为基线距离，为指尖到深感摄像头的距离，为深感摄像头焦距。
[0010]作为本专利技术的一种优选技术方案：所述两深感摄像头成像视差s通过图像的局部立体匹配算法得到：
其中，为匹配代价函数，x，y为摄像头坐标系上任一点对应的x轴y轴坐标，表示匹配窗口灰度均值，A为匹配区域，m为窗口偏移量。
[0011]作为本专利技术的一种优选技术方案：对所述局部立体匹配算法进行训练，通过AP检测窗口检测优劣：其中，AP为检测平均精确率，为样本训练预测精确率，通过检测AP和的值调整局部立体匹配算法的窗口大小。
[0012]作为本专利技术的一种优选技术方案：所述步骤S1.4中指尖悬停后靠近车机屏幕时，深感摄像头捕捉指尖悬停位置，服务器根据摄像头坐标与车机屏幕坐标的位置转换关系，识别检测指尖触发区域对应的按钮功能，并呈现按钮对应功能。
[0013]作为本专利技术的一种优选技术方案：所述摄像头坐标与车机屏幕坐标的位置转换关系如下：其中，为表示坐标点在车机屏幕坐标系的位置，H表示摄像头坐标系到车机屏幕坐标系的旋转矩阵，q表示坐标点在摄像头坐标系的位置，G表示平移矩阵；设定阈值，当满足：认为车机屏幕按钮与摄像头坐标系上的点相对应。
[0014]作为本专利技术的一种优选技术方案：所述步骤S1.4中服务器设定指尖悬停位置与屏幕距离阈值，当判断指尖悬停位置大于设定阈值时，展示按钮动态特性；当判断指尖悬停位置小于设定阈值时，触发指尖悬停区域按钮功能。
[0015]本专利技术提供的手指与车机无接触即可完成按键和功能触发的方法，与现有技术相比，其有益效果有：本专利技术通过利用深感摄像头的坐标变换算法以及空间测距法实现无接触的情况下进行按键的点击和触发对应的功能，在车机中可以通过深感摄像头捕捉定位，与车机屏幕坐标相结合，再根据指尖与深感摄像头的距离判断是否进行点击，以达到完成本次触发。
实现了人员无接触操控，避免了病毒的接触式传播。
附图说明
[0016]图1为本专利技术优选实施例的方法流程图；图2为本专利技术优选实施例中方法流程框图。
具体实施方式
[0017]需要说明的是，在不冲突的情况下，本实施例中的实施例及实施例中的特征可以相互组合，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0018]参照图1
‑
图2，本专利技术优选实施例提供了一种手指与车机无接触即可完成按键和功能触发的方法，包括如下步骤：步骤S1.1：深感摄像头捕捉屏幕上方的指尖悬停信息；步骤S1.2：当深感摄像头采集到指尖悬停信息时，将数据回传给服务器；步骤S1.3：服务器根据坐标变换算法以及空间测距法确认指尖悬停位置；步骤S1.4：指尖悬停后靠近车机屏幕，服务器根据指尖悬停位置进行判断及处理。
[0019]步骤S1.1中，深感摄像头的捕捉起始点为屏幕左上角或屏幕左下角。
[0020]对步骤S1.3中，坐标变换算法具体包括二维平面坐标系的坐标与三维世界坐标系的坐标之间的转换，其中，二维平面坐标系的平面与三维世界坐标系的xoy平面相重合，设定三维世界坐标点，其中，X、Y、Z分别为点Q在三维世界坐标系X轴、Y轴、Z轴上的位置，为根据Q点坐标转换的转置矩阵，二维平面坐标点为，其中，u、v分别为点q在二维平面坐标系X轴、Y轴上的位置，为根据q点坐标转换的转置矩阵，三维世界坐标点Q与二维平面坐标点q的映射关系满足：其中，s为坐标系变换尺度因子；分别为二维平面坐标点q、三维世界坐标点Q的增广矩阵；P为深感摄像头内参矩阵，构成内参矩阵，R为旋转矩阵，M为平移矩阵，内深感摄像头参矩阵P满足：两深感摄像头标定的过程中存在畸变，包括径向畸变和切向畸变，设定点为深感摄像头获取的点，为点经去畸变、矫正后
得到的点，其关系为：其中，确定径向畸变，确定切向畸变。
[0021]步骤S1.3中的空间测距法，根据车机内两深感摄像头的成像视差来确定指尖本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种手指与车机无接触即可完成按键和功能触发的方法，其特征在于：包括如下步骤：步骤S1.1：深感摄像头捕捉屏幕上方的指尖悬停信息；步骤S1.2：当深感摄像头采集到指尖悬停信息时，将数据回传给服务器；步骤S1.3：服务器根据坐标变换算法以及空间测距法确认指尖悬停位置；步骤S1.4：指尖悬停后靠近车机屏幕，服务器根据指尖悬停位置进行判断及处理；所述步骤S1.3中，坐标变换算法具体包括二维平面坐标系的坐标与三维世界坐标系的坐标之间的转换，其中，二维平面坐标系的平面与三维世界坐标系的xoy平面相重合，设定三维世界坐标点，其中，X、Y、Z分别为点Q在三维世界坐标系X轴、Y轴、Z轴上的位置，为根据Q点坐标转换的转置矩阵，二维平面坐标点为，其中，分别为点q在二维平面坐标系X轴、Y轴上的位置，为根据q点坐标转换的转置矩阵，三维世界坐标点与二维平面坐标点q的映射关系满足：其中，s为坐标系变换尺度因子；分别为二维平面坐标点q、三维世界坐标点Q的增广矩阵；P为深感摄像头内参矩阵，构成内参矩阵，为旋转矩阵，为平移矩阵，深感摄像头内参矩阵P满足：其中，为光心坐标；为焦距与像素横纵比的融合；两深感摄像头标定的过程中存在畸变，包括径向畸变和切向畸变，设定点为深感摄像头获取的点，点为点经去畸变、矫正后得到的点，其关系为：其中，为径向畸变系数，为切向畸变系数。2.根据权利要求1所述的一种手指与车机无接触即可完成按键和功能触发的方法，其特征在于：所述步骤S1.1中，深感摄像头的捕捉起始点为屏幕左上角或屏幕左下角。3.根据权利要求1所述的一种手指与车机无接触即可完成按键和功能触发的方法，其
特征在于：所述步骤S1.3中的空间测距法，根据车机内两深感摄像头的成像视差来确定指尖到深感摄像头的距离：其中，为成像平面最左侧点的横坐标，为成像平...

【专利技术属性】
技术研发人员：张明俊，
申请(专利权)人：润芯微科技江苏有限公司，
类型：发明
国别省市：