一种摄像和大屏交互处理方法、装置及系统制造方法及图纸

技术编号:27823478 阅读:66 留言:0更新日期:2021-03-30 10:54
本申请提供一种摄像和大屏交互处理方法、装置及系统,包括:获取实时的肢体识别图像以及大屏显示图像;将所述肢体识别图像映射到大屏显示图像并识别操作指令;识别大屏显示图像中与所述肢体识别图像的特征肢体部位对应的第一特征区域;实时获取操作人员的眼动识别图像;将所述眼动识别图像映射到大屏显示图像;识别大屏显示图像中与所述眼动识别图像的眼动识别部位对应的第二特征区域;若所述第一特征区域与所述第二特征区域位于大屏显示图像中同一操作区域,输出有效指令以及所述操作指令;所述操作区域为依据实时的大屏显示图像预先划分的区域。先划分的区域。先划分的区域。

【技术实现步骤摘要】
一种摄像和大屏交互处理方法、装置及系统


[0001]本申请涉及屏幕交互
,尤其是涉及一种摄像和大屏交互处理方法、装置及系统。

技术介绍

[0002]目前基于大屏幕显示器的操作演示已广泛应用于教育、企业、军事等领域的教室、会议室、指挥室,大屏幕展示系统得到飞速发展。
[0003]触控式投影设备等光学触控屏幕作为一种常用的大屏展示系统用具,其主要通过识别人体的肢体动作获取操作大屏显示画面的指令。但是相关设备的使用过程中,由于操作人员的肢体动作一部分为了操控大屏,但是也有一部分与大屏操控无关,使得通过识别人体肢体动作获得的指令有一部分是无效的,而系统却无法识别出这些无效的指令,导致操作人员在使用相关设备过程中经常性的发生误操作的状况。如系统识别手臂朝向大屏点击的动作为单击指令,但是当操作人员不需要单击操作却使用了手臂朝向大屏点击的动作时,系统仍会识别成接收到单击指令,并对大屏展示的内容进行操作,导致误操作的状况发生。

技术实现思路

[0004]为了能够降低输出到大屏的操作指令为无效操作指令状况发生的概率,提高大屏展示系统操作的便利性,本申请目的是提供一种摄像和大屏交互处理方法、装置及系统。
[0005]第一方面,本申请提供了一种摄像和大屏交互处理方法,包括:获取实时的肢体识别图像以及大屏显示图像;将所述肢体识别图像映射到大屏显示图像并识别操作指令;识别大屏显示图像中与所述肢体识别图像的特征肢体部位对应的第一特征区域;实时获取操作人员的眼动识别图像;将所述眼动识别图像映射到大屏显示图像;识别大屏显示图像中与所述眼动识别图像的眼动识别部位对应的第二特征区域;若所述第一特征区域与所述第二特征区域位于大屏显示图像中同一操作区域,输出有效指令以及所述操作指令;所述操作区域为依据实时的大屏显示图像预先划分的区域。
[0006]通过采用上述技术方案,第一特征区域与第二特征区域位于大屏显示图像中同一操作区域时,说明操作人员眼睛所关注的区域与肢体动作所对应的区域同属于大屏上的同一个操作区域,此时输出识别的操作指令,使得大屏按照操作指令进行工作。由于增加了判断人眼与肢体动作对应大屏显示图像上同一操作区域的条件,从而降低了输出到大屏的操作指令为无效操作指令的概率,进而降低了因为对操作人员肢体动作识别不准而造成的误操作状况发生的概率,提高了大屏展示系统操作的便利性。
[0007]在一较佳示例中,通过眼动仪获取所述操作人员的眼动识别图像。
[0008]在一较佳示例中,所述识别操作指令的方法为:获取当前肢体识别图像以及与当前肢体识别图像顺序排列的多帧在先的肢体识别图像;识别所述肢体识别图像中的特征肢体部位;依据多帧在先的肢体识别图像以及当前肢体识别图像计算所述特征肢体部位的移动轨迹;对比所述移动轨迹与预先存储的肢体行为数据库存储的对应每一种操作指令的肢体动作数据,当所述移动轨迹与所述肢体动作数据相同时,输出对应的所述操作指令。
[0009]通过采用上述技术方案,利用依据多帧在先的肢体识别图像以及当前肢体识别图像计算的特征肢体部位的移动轨迹判断操作指令的类型,降低了因为对操作人员肢体动作识别不准而造成的无效操作指令的识别发生概率,进一步的提高了大屏展示系统操作的便利性在一较佳示例中,其特征在于:若所述第一特征区域与所述第二特征区域不位于大屏显示图像中同一操作区域,不输出有效指令或所述操作指令第二方面,本申请还提供一种摄像和大屏交互处理装置,包括:数据获取模块,用于获取实时的肢体识别图像、大屏显示图像以及眼动识别图像;第一数据处理模块,用于将所述肢体识别图像映射到大屏显示图像并识别操作指令;第一识别模块,用于识别大屏显示图像中与所述肢体识别图像的特征肢体部位对应的第一特征区域;第二数据处理模块,用于将所述眼动识别图像映射到大屏显示图像;第二识别模块,用于识别大屏显示图像中与所述眼动识别图像的眼动识别部位对应的第二特征区域;输出控制模块,用于在所述第一特征区域与所述第二特征区域位于大屏显示图像中同一操作区域时,输出所述有效指令以及所述操作指令;所述操作区域为依据实时的大屏显示图像预先划分的区域。
[0010]在一较佳示例中,所述数据获取模块通过眼动仪获取所述操作人员的眼动识别图像。
[0011]在一较佳示例中,所述第一数据处理模块包括:数据获取单元,用于获取当前肢体识别图像以及与当前肢体识别图像顺序排列的多帧在先的肢体识别图像;特征识别单元,用于识别所述肢体识别图像中的特征肢体部位;轨迹计算单元,用于依据多帧在先的肢体识别图像以及当前肢体识别图像计算所述特征肢体部位的移动轨迹;指令识别单元,用于对比所述移动轨迹与预先存储的肢体行为数据库存储的对应每一种操作指令的肢体动作数据,当所述移动轨迹与所述肢体动作数据相同时,输出对应的所述操作指令。
[0012]在一较佳示例中,当所述第一特征区域与所述第二特征区域不位于大屏显示图像
中同一操作区域,输出控制模块不输出有效指令或所述操作指令。
[0013]第三方面,本申请还提供一种摄像和大屏交互处理系统,所述系统包括:一个或多个存储器,用于存储指令;以及一个或多个处理器,用于从所述存储器中调用并运行所述指令,执行如权利要求1

6中任意一项所述的方法。
[0014]综上所述,本申请包括以下至少一种有益技术效果:1.操作人员肢体动作识别准确,利用依据多帧在先的肢体识别图像以及当前肢体识别图像计算的特征肢体部位的移动轨迹判断操作指令的类型,降低了因为对操作人员肢体动作识别不准而造成的无效操作指令的识别发生概率;2.大屏接收到的无效操作指令概率低,由于增加了判断人眼与肢体动作对应大屏显示图像上同一操作区域的条件,从而降低了输出到大屏的操作指令为无效操作指令的概率。
附图说明
[0015]图1是本申请其中摄像和大屏交互处理方法的流程图。
[0016]图2是本申请其中识别操作指令的流程示意图。
[0017]图3是本申请其中摄像和大屏交互处理装置的示意框图。
[0018]图4是本申请中第一数据处理模块的示意框图。
具体实施方式
[0019]为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。
[0020]另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,如无特殊说明,一般表示前后关联对象是一种“或”的关系。
[0021]下面结合说明书附图对本申请实施例作进一步详细描述。
[0022]本申请实施例提供一种摄像和大屏交互处理方法,所述方法的主要流程描述如下。
[0023]如图1所示:步骤100:获取实时的肢体识别图像以及大屏显示图像。
[0024]通过安装在大屏上的摄像本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种摄像和大屏交互处理方法,其特征在于,包括:获取肢体识别图像以及大屏显示图像;将所述肢体识别图像映射到大屏显示图像并识别操作指令;识别大屏显示图像中与所述肢体识别图像的特征肢体部位对应的第一特征区域;实时获取操作人员的眼动识别图像;将所述眼动识别图像映射到大屏显示图像;识别大屏显示图像中与所述眼动识别图像的眼动识别部位对应的第二特征区域;若所述第一特征区域与所述第二特征区域位于大屏显示图像中同一操作区域,输出有效指令以及所述操作指令;所述操作区域为依据实时的大屏显示图像预先划分的区域。2.根据权利要求1所述的一种摄像和大屏交互处理方法,其特征在于:通过眼动仪获取所述操作人员的眼动识别图像。3.根据权利要求1所述的一种摄像和大屏交互处理方法,其特征在于,所述识别操作指令的方法为:获取当前肢体识别图像以及与当前肢体识别图像顺序排列的多帧在先的肢体识别图像;识别所述肢体识别图像中的特征肢体部位;依据多帧在先的肢体识别图像以及当前肢体识别图像计算所述特征肢体部位的移动轨迹;对比所述移动轨迹与预先存储的肢体行为数据库存储的对应每一种操作指令的肢体动作数据,当所述移动轨迹与所述肢体动作数据相同时,输出对应的所述操作指令。4.根据权利要求1所述的一种摄像和大屏交互处理方法,其特征在于:若所述第一特征区域与所述第二特征区域不位于大屏显示图像中同一操作区域,不输出有效指令或所述操作指令。5.一种摄像和大屏交互处理装置,其特征在于,包括:数据获取模块,用于获取肢体识别图像、大屏显示图像以及眼动识别图像;第一数据处理模块,用于将所述肢体识别图像映射到大屏显示图像并识别操作指令;第一识别模块,用于识别大屏显示图像中...

【专利技术属性】
技术研发人员:周肃张海焦李进福张大勇常俊杰许春凤
申请(专利权)人:北京博睿维讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1