屏幕控制方法及装置制造方法及图纸

本公开实施例是关于一种屏幕控制方法及装置，属于声波成像领域。所述方法包括：通过声波发射组件向屏幕的上方发射探测声波信号；根据声波接收组件接收到的回波信号生成操作物影像，回波信号是探测声波信号到达操作物后返回的声波信号；根据操作物影像识别操作物的操作物动作；控制屏幕中显示的预设操作控件响应操作物动作，预设操作控件用于选取屏幕中的指定显示内容。本公开实施例实现了利用虚拟操作控件替代手指在屏幕上执行各种操作，使得用户在无法双手操控移动设备的情况下，也能够通过单手手指动作对整个屏幕进行控制，提高了用户对屏幕的控制效率；同时，控制过程中屏幕显示内容不会受到影响，保证了屏幕显示效果。

Screen control method and device

The embodiment of the invention relates to a screen control method and a device, belonging to the field of acoustic imaging. The method includes: transmitting to the top of the screen to detect acoustic signals by acoustic emission components; according to the sound wave receiving component receives the echo signal generating operation of the image, the echo signal is acoustic signal detection to operating acoustic signal return; according to the operation object image recognition operation the operating action; control screen display the preset operation control response operation, operation control is used to select the specified default display content on the screen. The disclosed embodiments can perform various operations on the screen using virtual operating controls instead of fingers, make the user in the hands of mobile devices cannot control circumstances, can control the whole screen with one hand and finger movements, improve the user control effect on screen rate; at the same time, the control process will not be displayed on the screen the screen display effect.

【技术实现步骤摘要】
屏幕控制方法及装置
本公开涉及声波成像领域，特别涉及一种屏幕控制方法及装置。
技术介绍
随着屏幕显示技术的不断发展，为了达到更好的显示效果，越来越多的移动设备开始配置大尺寸的触控屏幕。然而，由于单手触控范围有限，用户对大屏移动设备进行触控操作时，往往需要通过双手才能对位于触控屏幕边缘的控件进行触控操作，在用户无法双手操控移动设备的场景下，比如在拥挤的公交或地铁中，给用户操作带来不便。
技术实现思路
本公开实施例提供了一种屏幕控制方法及装置，技术方案如下：根据本公开实施例的第一方面，提供了一种屏幕控制方法，用于屏幕下方设置有声波发射组件和声波接收组件的移动设备，该方法包括：通过声波发射组件向屏幕的上方发射探测声波信号；根据声波接收组件接收到的回波信号生成操作物影像，回波信号是探测声波信号到达操作物后返回的声波信号；根据操作物影像识别操作物的操作物动作；控制屏幕中显示的预设操作控件响应操作物动作，预设操作控件为选取屏幕中的指定显示内容。可选的，根据操作物影像识别操作物的操作物动作，包括：识别操作物影像中包含的操作物尖端区域；计算操作物尖端区域在第一方向上的第一距离变化量以及在第二方向上的第二距离变化量，第一方向为平行于屏幕的方向，第二方向为垂直于屏幕的方向；当第一距离变化量大于第一阈值，且第二距离变化量小于第二阈值时，确定操作物动作为划动；当第一距离变化量小于第一阈值，且第二距离变化量大于第二阈值时，确定操作物动作为点击。可选的，控制屏幕中显示的预设操作控件响应操作物动作，包括：当识别出操作物动作为划动时，获取划动方向和划动距离；根据划动方向和划动距离控制预设操作控件在屏幕上进行划动操作；当识别出操作物动作为点击时，获取预设操作控件在屏幕上的显示区域；对显示区域内的显示内容进行点击操作。可选的，根据划动方向和划动距离控制预设操作控件在屏幕上进行划动操作，包括：根据划动距离和预定放大系数计算控件划动距离，预定放大系数＞1；根据控件划动距离控制预设操作控件在划动方向上划动。可选的，该方法，还包括：当识别出操作物动作为划动时，检测当前划动是否为惯性划动，惯性划动为操作物划动后的反向收回动作；当检测到当前划动为惯性划动时，停止响应该操作物动作。可选的，检测当前划动是否为惯性划动，包括：获取当前划动的第一划动方向以及前向相邻划动的第二划动方向；当第一划动方向与第二划动方向相反，且当前划动与前向相邻划动之间的时间间隔小于预设阈值时，确定当前划动为惯性划动；或，获取当前划动的第一划动方向以及前向相邻划动的第二划动方向；获取当前划动的第一划动加速度以及前向相邻划动的第二划动加速度；当第一划动方向与第二划动方向相反，且当前划动与前向相邻划动之间的时间间隔小于预设阈值，且第一划动加速度大于第二划动加速度时，确定当前划动为惯性划动。可选的，根据声波接收组件接收到的回波信号生成操作物影像，包括：根据回波信号生成回波影像；将回波影像中由屏幕边缘延伸至屏幕中央的影像确定为操作物影像。根据本公开实施例的第二方面，提供了一种屏幕控制装置，用于屏幕下方设置有声波发射组件和声波接收组件的移动设备，该装置包括：发射模块，被配置为通过声波发射组件向屏幕的上方发射探测声波信号；生成模块，被配置为根据声波接收组件接收到的回波信号生成操作物影像，回波信号是探测声波信号到达操作物后返回的声波信号；识别模块，被配置为根据操作物影像识别操作物的操作物动作；控制模块，被配置为控制屏幕中显示的预设操作控件响应操作物动作，预设操作控件用于选取所述屏幕中的指定显示内容。可选的，识别模块，包括：识别子模块，被配置为识别操作物影像中包含的操作物尖端区域；计算子模块，被配置为计算操作物尖端区域在第一方向上的第一距离变化量以及在第二方向上的第二距离变化量，第一方向为平行于屏幕的方向，第二方向为垂直于屏幕的方向；第一确定子模块，被配置为当第一距离变化量大于第一阈值，且第二距离变化量小于第二阈值时，确定操作物动作为划动；第二确定子模块，被配置为当第一距离变化量小于第一阈值，且第二距离变化量大于第二阈值时，确定操作物动作为点击。可选的，控制模块，包括：第一控制子模块，被配置为当识别出操作物动作为划动时，获取划动方向和划动距离；根据划动方向和划动距离控制预设操作控件在屏幕上进行划动操作；第二控制子模块，被配置为当识别出操作物动作为点击时，获取预设操作控件在屏幕上的显示区域；对显示区域内的显示内容进行点击操作。可选的，第一控制子模块，还被配置为：根据划动距离和预定放大系数计算控件划动距离，预定放大系数＞1；根据控件划动距离控制预设操作控件在划动方向上划动。可选的，该装置，还包括：检测模块，被配置为当识别出操作物动作为划动时，检测当前划动是否为惯性划动，惯性划动为操作物划动后的反向收回动作；停止响应模块，被配置为当检测到当前划动为惯性划动时，停止响应操作物动作。可选的，检测模块，包括：第一检测子模块，被配置为获取当前划动的第一划动方向以及前向相邻划动的第二划动方向；当第一划动方向与第二划动方向相反，且当前划动与前向相邻划动之间的时间间隔小于预设阈值时，确定当前划动为惯性划动；或，第二检测子模块，被配置为获取当前划动的第一划动方向以及前向相邻划动的第二划动方向；获取当前划动的第一划动加速度以及前向相邻划动的第二划动加速度；当第一划动方向与第二划动方向相反，且当前划动与前向相邻划动之间的时间间隔小于预设阈值，且第一划动加速度大于第二划动加速度时，确定当前划动为惯性划动。可选的，生成模块，包括：生成子模块，被配置为根据回波信号生成回波影像；影像确定子模块，被配置为将回波影像中由屏幕边缘延伸至屏幕中央的影像确定为操作物影像。根据本公开实施例的第三方面，提供了一种屏幕控制装置，该装置包括：处理器、设置在屏幕下方的声波发射组件和声波接收组件；用于存储处理器可执行指令的存储器；其中，处理器被配置为：通过声波发射组件向屏幕的上方发射探测声波信号；根据声波接收组件接收到的回波信号生成操作物影像，回波信号是探测声波信号到达操作物后返回的声波信号；根据操作物影像识别操作物的操作物动作；控制屏幕中显示的预设操作控件响应操作物动作，预设操作控件用于选取屏幕中的指定显示内容。本公开实施例提供的技术方案可以包括以下有益效果：移动设备利用设置在屏幕下方的声波发射组件发射探测声波信号，并根据返回的回波信号生成用户手指的手指影像，进而控制屏幕中的预设操作控件对手指影像所指示的手指动作进行响应，实现了利用虚拟操作控件替代手指在屏幕上执行各种操作，使得用户在无法双手操控移动设备的情况下，也能够通过单手手指动作对整个屏幕进行控制，提高了用户对屏幕的控制效率；同时，控制过程中屏幕显示内容不会受到影响，保证了屏幕显示效果。应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。图1是根据本公开一示例性实施例示出的屏幕控制方法的方法流程图；图2A是根据本公开另一示例性实施例示出的屏幕控制方法的方法流程图；图2B是手指影像中指尖区域的示意图；图2C是图2A所示屏幕控制方法中根据手本文档来自技高网...

【技术保护点】
一种屏幕控制方法，其特征在于，用于屏幕下方设置有声波发射组件和声波接收组件的移动设备，所述方法包括：通过所述声波发射组件向所述屏幕的上方发射探测声波信号；根据所述声波接收组件接收到的回波信号生成操作物影像，所述回波信号是所述探测声波信号到达操作物后返回的声波信号；根据所述操作物影像识别所述操作物的操作物动作；控制所述屏幕中显示的预设操作控件响应所述操作物动作，所述预设操作控件用于选取所述屏幕中的指定显示内容。

【技术特征摘要】
1.一种屏幕控制方法，其特征在于，用于屏幕下方设置有声波发射组件和声波接收组件的移动设备，所述方法包括：通过所述声波发射组件向所述屏幕的上方发射探测声波信号；根据所述声波接收组件接收到的回波信号生成操作物影像，所述回波信号是所述探测声波信号到达操作物后返回的声波信号；根据所述操作物影像识别所述操作物的操作物动作；控制所述屏幕中显示的预设操作控件响应所述操作物动作，所述预设操作控件用于选取所述屏幕中的指定显示内容。2.根据权利要求1所述的方法，其特征在于，所述根据所述操作物影像识别所述操作物的操作物动作，包括：识别所述操作物影像中包含的操作物尖端区域；计算所述操作物尖端区域在第一方向上的第一距离变化量以及在第二方向上的第二距离变化量，所述第一方向为平行于所述屏幕的方向，所述第二方向为垂直于所述屏幕的方向；当所述第一距离变化量大于第一阈值，且所述第二距离变化量小于第二阈值时，确定所述操作物动作为划动；当所述第一距离变化量小于所述第一阈值，且所述第二距离变化量大于所述第二阈值时，确定所述操作物动作为点击。3.根据权利要求1或2所述的方法，其特征在于，所述控制所述屏幕中显示的预设操作控件响应所述操作物动作，包括：当识别出所述操作物动作为划动时，获取划动方向和划动距离；根据所述划动方向和所述划动距离控制所述预设操作控件在所述屏幕上进行划动操作；当识别出所述操作物动作为点击时，获取所述预设操作控件在所述屏幕上的显示区域；对所述显示区域内的显示内容进行点击操作。4.根据权利要求3所述的方法，其特征在于，所述根据所述划动方向和所述划动距离控制所述预设操作控件在所述屏幕上进行划动操作，包括：根据所述划动距离和预定放大系数计算控件划动距离，所述预定放大系数＞1；根据所述控件划动距离控制所述预设操作控件在所述划动方向上划动。5.根据权利要求1或2所述的方法，其特征在于，所述方法，还包括：当识别出所述操作物动作为划动时，检测当前划动是否为惯性划动，所述惯性划动为所述操作物划动后的反向收回动作；当检测到所述当前划动为所述惯性划动时，停止响应所述操作物动作。6.根据权利要求5所述的方法，其特征在于，所述检测当前划动是否为惯性划动，包括：获取所述当前划动的第一划动方向以及前向相邻划动的第二划动方向；当所述第一划动方向与所述第二划动方向相反，且所述当前划动与所述前向相邻划动之间的时间间隔小于预设阈值时，确定所述当前划动为所述惯性划动；或，获取所述当前划动的所述第一划动方向以及所述前向相邻划动的所述第二划动方向；获取所述当前划动的第一划动加速度以及所述前向相邻划动的第二划动加速度；当所述第一划动方向与所述第二划动方向相反，且所述当前划动与所述前向相邻划动之间的时间间隔小于所述预设阈值，且所述第一划动加速度大于所述第二划动加速度时，确定所述当前划动为所述惯性划动。7.根据权利要求1或2所述的方法，其特征在于，所述根据所述声波接收组件接收到的回波信号生成操作物影像，包括：根据所述回波信号生成回波影像；将所述回波影像中由屏幕边缘延伸至屏幕中央的影像确定为所述操作物影像。8.一种屏幕控制装置，其特征在于，用于屏幕下方设置有声波发射组件和声波接收组件的移动设备，所述装置包括：发射模块，被配置为通过所述声波发射组件向所述屏幕的上方发射探测声波信号；生成模块，被配置为根据所述声波接收组件接收到的回波信号生成操作物影像，所述回波信号是所述探测声波信号到达操作物后返回的声波信号；识别模块，被配...

【专利技术属性】
技术研发人员：陈兴华，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：北京,11