非触摸显示屏设备的控制方法、装置、系统和计算机设备制造方法及图纸

技术编号:18615441 阅读:34 留言:0更新日期:2018-08-05 00:31
本申请涉及一种非触摸显示屏设备的控制方法、系统、计算机设备和存储介质。所述方法包括:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频图像和第二视频图像由分别设置在显示屏的一横向边缘侧和一纵向边缘侧且朝向显示屏的两个图像采集装置同时采集得到;根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触;在检测到显示屏上存在触摸体的接触后,根据第一视频图像确定触摸体与显示屏的接触位置的横坐标值,根据第二视频图像确定接触位置的纵坐标值;根据横坐标值和纵坐标值生成接触位置的坐标,根据该坐标控制非触摸显示屏设备。采用本发明专利技术方案,能够提升人非触摸显示屏设备的机交互效率。

【技术实现步骤摘要】
非触摸显示屏设备的控制方法、装置、系统和计算机设备
本申请涉及人机交互
,特别是涉及一种非触摸显示屏设备的控制方法、装置、系统、计算机设备和存储介质。
技术介绍
在信息高速发展的时代,显示技术作为信息传播的最终环节所依托的技术基础,是信息传播过程中不可或缺的一环。在大型超市或者商场、医院等公共产所均安装大量的显示终端,由于人机交互需求的不断提高,原有的一些显示终端(显示屏不是触摸屏的终端)无法向触摸屏一样实现人机交互。传统的实现对原有的显示终端的人机交互的一种方式为:将显示屏需垂直安装,照相机安装在显示屏斜上方,在高速照相机前安置一个偏振片,消除显示屏上的偏振光,去除视频中的噪音影响,再提取手部位的外轮廓,利用形状空间理论方法来识别手势,根据识别的手势变化来操作显示终端,实现了人机交互。然而,该方式中,手掌的位置容易人的身体被遮挡,造成手势识别困难且容易被判定为无效,使得人机交互效率较低。
技术实现思路
基于此,有必要针对上述人机交互效率低的技术问题,提供一种能够提升非触摸显示屏设备的人机交互效率的非触摸显示屏设备的控制方法、装置、系统、计算机设备和存储介质。一种非触摸显示屏设备的控制方法,该方法包括:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频图像和第二视频图像由分别设置在显示屏的一横向边缘侧和一纵向边缘侧且朝向显示屏的两个图像采集装置同时采集得到;根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触;在检测到显示屏上存在触摸体的接触后,根据第一视频图像确定触摸体与显示屏的接触位置的横坐标值,根据第二视频图像确定接触位置的纵坐标值;根据横坐标值和纵坐标值生成接触位置的坐标,根据该坐标控制非触摸显示屏设备。在其中一个实施例中,在第一视频图像和第二视频图像中的显示屏图像分别为一条直线;上述的根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触的步骤包括:根据第一视频图像确定触摸体在第一视频图像中的第一目标区域,在第一目标区域与第一视频图像中的显示屏图像所在直线有交点时,判定显示屏上存在触摸体的接触;或者,根据第二视频图像确定触摸体在第二视频图像中的第二目标区域,在第二目标区域与第二视频图像中的显示屏图像所在直线有交点时,判定显示屏上存在触摸体的接触。在其中一个实施例中,上述的根据第一视频图像确定触摸体在第一视频图像中的第一目标区域的步骤包括:将第一视频图像中各个像素点的颜色值分别与预设的触摸体颜色值范围进行比较,将颜色值在触摸体颜色值范围内的像素点的颜色值设置为第一数值,将颜色值未在触摸体颜色值范围内的像素点的颜色值设置为第二数值,得到第一视频图像对应的第一二值化图像,根据第一二值化图像确定第一目标区域;上述的根据第二视频图像确定触摸体在第二视频图像中的第二目标区域的步骤包括:将第二视频图像中各个像素点的颜色值分别与预设的触摸体颜色值范围进行比较,将颜色值在触摸体颜色值范围内的像素点的颜色值设置为第一数值,将颜色值未在触摸体颜色值范围内的像素点的颜色值设置为第二数值,得到第二视频图像对应的第二二值化图像,根据第二二值化图像确定第二目标区域。在其中一个实施例中,上述的根据第一二值化图像确定第一目标区域的步骤包括:将第一二值化图像分别按照列和行进行灰度值统计得到第一统计结果,根据第一统计结果确定有灰度值为第一数值的像素点且左右相邻没有灰度值为第一数值的像素点的第一目标像素列和第一目标像素行,将第一目标像素列和第一目标像素行的灰度值置为第二数值,得到第三二值化图像,根据第三二值化图像确定第一目标区域;上述的根据第二二值化图像确定第二目标区域的步骤包括:将第二二值化图像分别按照列和行进行灰度值统计得到第二统计结果,根据第二统计结果确定有灰度值为第一数值像素点的且左右相邻没有灰度值为第二数值的像素点的第二目标像素列和第二目标像素行,将第二目标像素列和第二目标像素行的灰度值置为第二数值,得到第四二值化图像,根据第四二值化图像确定第二目标区域。在其中一个实施例中,根据第三二值化图像将在对应的显示屏图像所在直线上的灰度值为第一数值的像素点确定为第一目标区域与第一视频图像中的显示屏图像所在直线的交点,根据第四二值化图像将在对应的显示屏图像所在直线上的灰度值为第一数值的像素点确定为第二目标区域与第二视频图像中的显示屏图像所在直线的交点;根据第一目标区域与第一视频图像中的显示屏图像所在直线的交点确定接触位置的横坐标值,根据第二目标区域与第二视频图像中的显示屏图像所在直线的交点确定接触位置的纵坐标值。在其中一个实施例中,上述的非触摸显示屏设备的触摸点定位方法,还包括:通过设置在非触摸显示屏设备上的距离检测装置或者红外检测装置的检测数据检测预设距离范围内是否有操作人员,在判定存在操作人员时,启动两个图像采集装置,在判定操作人员离开时,关闭两个图像采集装置。一种非触摸显示屏设备的控制装置,该装置包括:图像获取模块,用于获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频图像和第二视频图像由分别设置在显示屏的一横向边缘侧和一纵向边缘侧且朝向显示屏的两个图像采集装置同时采集得到;定位模块,用于根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触,在检测到显示屏上存在触摸体的接触时,根据第一视频图像确定触摸体与显示屏的接触位置的横坐标值或者横坐标范围,根据第二视频图像确定接触位置的纵坐标值或者纵坐标范围,根据横坐标值和纵坐标值或者根据横坐标范围和纵坐标范围确定接触位置的坐标;控制模块,用于用于根据定位模块所确定的坐标控制非触摸显示屏设备。一种非触摸显示屏设备的控制系统,该系统包括交互控制模块和两个图像采集装置;两个图像采集装置分别设置在非触摸显示屏设备的显示屏的一横向边缘侧和一纵向边缘侧且朝向显示屏;交互控制模块获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频图像和第二视频图像由两个图像采集装置同时采集得到,根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触,在检测到显示屏上存在触摸体的接触时,根据第一视频图像确定触摸体与显示屏的接触位置的横坐标值或者横坐标范围,根据第二视频图像确定接触位置的纵坐标值或者纵坐标范围,根据横坐标值和纵坐标值或者根据横坐标范围和纵坐标范围确定接触位置的坐标,根据该坐标控制非触摸显示屏设备。一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频图像和第二视频图像由分别设置在显示屏的一横向边缘侧和一纵向边缘侧且朝向显示屏的两个图像采集装置同时采集得到;根据第一视频图像或者第二视频图像检测触摸体与显示屏的接触;在检测到显示屏上存在触摸体的接触后,根据第一视频图像确定触摸体与显示屏的接触位置的横坐标值,根据第二视频图像确定接触位置的纵坐标值;根据横坐标值和纵坐标值生成接触位置的坐标,根据该坐标控制非触摸显示屏设备。一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,第一视频本文档来自技高网...

【技术保护点】
1.一种非触摸显示屏设备的控制方法,所述方法包括:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,所述第一视频图像和所述第二视频图像由分别设置在所述显示屏的一横向边缘侧和一纵向边缘侧且朝向所述显示屏的两个图像采集装置同时采集得到;根据所述第一视频图像或者所述第二视频图像检测触摸体与所述显示屏的接触;在检测到所述显示屏上存在所述触摸体的接触后,根据所述第一视频图像确定所述触摸体与所述显示屏的接触位置的横坐标值,根据所述第二视频图像确定所述接触位置的纵坐标值;根据所述横坐标值和所述纵坐标值生成所述接触位置的坐标,根据该坐标控制所述非触摸显示屏设备。

【技术特征摘要】
1.一种非触摸显示屏设备的控制方法,所述方法包括:获取非触摸显示屏设备的显示屏的显示侧的第一视频图像和第二视频图像,所述第一视频图像和所述第二视频图像由分别设置在所述显示屏的一横向边缘侧和一纵向边缘侧且朝向所述显示屏的两个图像采集装置同时采集得到;根据所述第一视频图像或者所述第二视频图像检测触摸体与所述显示屏的接触;在检测到所述显示屏上存在所述触摸体的接触后,根据所述第一视频图像确定所述触摸体与所述显示屏的接触位置的横坐标值,根据所述第二视频图像确定所述接触位置的纵坐标值;根据所述横坐标值和所述纵坐标值生成所述接触位置的坐标,根据该坐标控制所述非触摸显示屏设备。2.根据权利要求1所述的非触摸显示屏设备的控制方法,其特征在于,在所述第一视频图像和所述第二视频图像中的显示屏图像分别为一条直线;所述根据所述第一视频图像或者所述第二视频图像检测触摸体与所述显示屏的接触的步骤包括:根据所述第一视频图像确定所述触摸体在所述第一视频图像中的第一目标区域,在所述第一目标区域与所述第一视频图像中的显示屏图像所在直线有交点时,判定所述显示屏上存在所述触摸体的接触;或者根据所述第二视频图像确定所述触摸体在所述第二视频图像中的第二目标区域,在所述第二目标区域与所述第二视频图像中的显示屏图像所在直线有交点时,判定所述显示屏上存在所述触摸体的接触。3.根据权利要求2所述的非触摸显示屏设备的控制方法,其特征在于:所述根据所述第一视频图像确定所述触摸体在所述第一视频图像中的第一目标区域的步骤包括:将所述第一视频图像中各个像素点的颜色值分别与预设的触摸体颜色值范围进行比较,将颜色值在所述触摸体颜色值范围内的像素点的颜色值设置为第一数值,将颜色值未在所述触摸体颜色值范围内的像素点的颜色值设置为第二数值,得到所述第一视频图像对应的第一二值化图像,根据所述第一二值化图像确定所述第一目标区域;所述根据所述第二视频图像确定所述触摸体在所述第二视频图像中的第二目标区域的步骤包括:将所述第二视频图像中各个像素点的颜色值分别与预设的触摸体颜色值范围进行比较,将颜色值在所述触摸体颜色值范围内的像素点的颜色值设置为第一数值,将颜色值未在所述触摸体颜色值范围内的像素点的颜色值设置为第二数值,得到所述第二视频图像对应的第二二值化图像,根据所述第二二值化图像确定所述第二目标区域。4.根据权利要求3所述的非触摸显示屏设备的控制方法,其特征在于:所述根据所述第一二值化图像确定所述第一目标区域的步骤包括:将所述所述第一二值化图像分别按照列和行进行灰度值统计得到第一统计结果,根据所述第一统计结果确定有灰度值为所述第一数值的像素点且左右相邻没有灰度值为所述第一数值的像素点的第一目标像素列和第一目标像素行,将所述第一目标像素列和所述第一目标像素行的灰度值置为所述第二数值,得到第三二值化图像,根据所述第三二值化图像确定所述第一目标区域;所述根据所述第二二值化图像确定所述第二目标区域的步骤包括:将所述所述第二二值化图像分别按照列和行进行灰度值统计得到第二统计结果,根据所述第二统计结果确定有灰度值为所述第一数值像素点的且左右相邻没有灰度值为所述第二数值的像素点的第二目标像素列和第二目标像素行,将所述第二目标像素列和所述第...

【专利技术属性】
技术研发人员:林凡成杰张秋镇杨峰李盛阳
申请(专利权)人:广州杰赛科技股份有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1