【技术实现步骤摘要】
按键识别方法、装置、终端设备及计算机可读存储介质
本专利技术属于智能终端
，尤其涉及一种按键识别方法、装置、设备及计算机可读存储介质。
技术介绍
十指键盘是重要的输入设备，是传统电脑的必不可少的组成。随着智能终端技术的发展，十指键盘已经不局限于在电脑上使用，还可以是与平板、手机连接后，供用户使用。但这种键盘是硬键盘，对用户来说不方便随身携带。
技术实现思路
有鉴于此，本专利技术实施例提供了按键识别方法、装置、设备及计算机可读存储介质，以解决现有技术中硬键盘不方便随时携带的问题。本专利技术实施例的第一方面提供了一种按键识别方法，包括：S1：通过摄像装置对软体键盘进行拍摄，得到视频流，所述视频流包括M个键盘图像帧，M为大于1的整数；S2：分别确定所述M个键盘图像帧中的每一键盘图像帧对应的手部区域；S3：依据所述每一键盘图像帧对应的手部区域以及预设按键区域排列顺序，分别确定所述每一键盘图像帧对应的被遮挡按键的序列；S4：将所述M个键盘图像帧对应的M个所述被遮挡按键的...
【技术保护点】
1.一种按键识别方法，其特征在于，包括：/nS1：通过摄像装置对软体键盘进行拍摄，得到视频流，所述视频流包括M个键盘图像帧，M为大于1的整数；/nS2：分别确定所述M个键盘图像帧中的每一键盘图像帧对应的手部区域；/nS3：依据所述每一键盘图像帧对应的手部区域以及预设按键区域排列顺序，分别确定所述每一键盘图像帧对应的被遮挡按键的序列；/nS4：将所述M个键盘图像帧对应的M个所述被遮挡按键的序列输入到训练好的循环神经网络中，得到按键识别结果。/n
【技术特征摘要】
1.一种按键识别方法，其特征在于，包括：
S1：通过摄像装置对软体键盘进行拍摄，得到视频流，所述视频流包括M个键盘图像帧，M为大于1的整数；
S2：分别确定所述M个键盘图像帧中的每一键盘图像帧对应的手部区域；
S3：依据所述每一键盘图像帧对应的手部区域以及预设按键区域排列顺序，分别确定所述每一键盘图像帧对应的被遮挡按键的序列；
S4：将所述M个键盘图像帧对应的M个所述被遮挡按键的序列输入到训练好的循环神经网络中，得到按键识别结果。
2.如权利要求1所述的按键识别方法，其特征在于，所述软体键盘上设置有标志位，所述分别确定所述M个键盘图像帧中的每一键盘图像帧对应的手部区域的步骤包括：
分别识别出每一键盘图像帧中的标志位，并根据所述标志位对每一键盘图像帧进行透视变换处理，得到每一键盘图像帧对应的新的键盘图像帧，所述新的键盘图像帧的观看角度为正上方垂直观看；
基于预设像素值，将所述新的键盘图像帧转换为二值图像；
基于最大连通域算法，在所述二值图像中确定手部区域。
3.如权利要求2所述的按键识别方法，其特征在于，所述依据所述每一键盘图像帧对应的手部区域以及预设按键区域排列顺序，分别确定所述每一键盘图像帧对应的被遮挡按键的序列的步骤包括：
确定每一键盘图像帧对应的二值图像中被所述手部区域遮挡的第一按键区域，以及未被所述手部区域遮挡的第二按键区域；
基于预设按键区域排列顺序，对每一键盘图像帧的第一按键区域对应的第一字符以及第二按键区域对应的第二字符进行排序，得到每一键盘图像帧对应的被遮挡按键的序列。
4.如权利要求3所述的按键识别方法，其特征在于，所述确定每一键盘图像帧对应的二值图像中被所述手部区域遮挡的第一按键区域，以及未被所述手部区域遮挡的第二按键区域的步骤包括：
获取每一键盘图像帧对应的二值图像中各个按键区域的坐标以及长宽；
基于每个按键区域的长宽将每个按键区域分为若干子区域，并基于每个按键区域的坐标，确定每个按键区域中各个子区域的中心点坐标；
基于每个按键区域中各个子区域的中心点坐标，分别检测每个按键区域对应的中心点中，是否存在至少Q个中心点位于所述手部区域中，其中，Q为正整数；
以存在至少Q个中心点位于所述手部区域中的按键区域为被所述手部区域遮挡的第一按键区域；
以不存在至少Q个中心点位于所述手部区域中的按键区域为未被所述手部区域遮挡的第二按键区域。
5.如权利要求1至4中任一项所述的按键识别方法，其特征在于，在所述通过摄像装置对软体键盘进行拍摄，得到视频流的步骤之前，还包括：
S5：通过摄像装置对...
【专利技术属性】
技术研发人员：陈永康，姜迪，王力锋，黄金玲，
申请(专利权)人：佛山长光智能制造研究院有限公司，
类型：发明
国别省市：广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。