一种基于面部微表情的鼠标控制系统技术方案

本发明专利技术公开了一种基于面部微表情的鼠标控制系统，所述鼠标控制系统由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。本发明专利技术通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。

A mouse control system based on facial microexpression

【技术实现步骤摘要】
一种基于面部微表情的鼠标控制系统
本专利技术属于图像处理和人机交互的鼠标控制领，具体涉及一种基于面部微表情的鼠标控制系统。
技术介绍
现今的KVM的一机多屏的实现方式，都是经过在KMV输出端，对鼠标的位置进行实时判断，以此判断鼠标是否跨过了单个屏幕的边界。这种方式的弊端在于，目标计算机上的鼠标未必和KVM输出端计数的位置完全一致，表现在A、目标主机开启鼠标加速（高精度）时，其移动位移不只是和距离有关，还和移动速度有关，难以拟合，需要关闭该功能，但影响系统功能，且有违人的使用习惯；B、在多头显卡应用中，有的系统采用的都是相对坐标，有的是相对坐标和绝对坐标组合；C、目标计算机计数原点多样。有的左小角为屏幕1起点，有的左上角为屏幕1起点。因此，现阶段KVM要做到一个席位上多个屏幕，每个屏幕接管不同计算机，而实现如多头显卡一样的跨屏效果，除了输出节点需要随时计算鼠标的位置进行拟合外，还需要关闭目标系统的鼠标加速，而且还需要针对不同的系统做不同的适配，限制了KVM的应用。本专利技术旨在解决如上问题，以便KVM无需关心目标计算机系统是否开启鼠标加速，是左下角第一屏幕还是右上角第一屏幕，是相对坐标还是绝对坐标，以及无需拟合鼠标位置，而是通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。
技术实现思路
针对现有技术中存在的问题，本专利技术通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。为了实现上述目的，本专利技术实施例提供了一种基于面部微表情的鼠标控制系统，其由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。所述处理器根据所述摄像头捕捉的面部眼球的偏转来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。所述处理器也可以根据所述摄像头捕捉的面部平面角度的变化来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。进一步的，所述处理器根据所述摄像头捕捉到的所述操作者的眼睛眨动的次数来控制所述鼠标操作，实现所述鼠标的功能。当所述摄像头捕捉到所述操作者的眼睛眨动1次时，所述处理器控制所述鼠标实现单击功能。当所述摄像头捕捉到所述操作者的眼睛眨动2次时，所述处理器控制所述鼠标实现双击功能。当所述摄像头捕捉到所述操作者眼睛眨动大于等于3次时，所述处理器不会控制所述鼠标实现功能。进一步的，所述处理器根据所述摄像头捕捉到的所述操作者左眼或右眼的眨动来控制所述鼠标操作，实现所述鼠标的功能。当所述摄像头捕捉到所述操作者的左眼眨动时，所述处理器控制所述鼠标实现左击功能。当所述摄像头捕捉到所述操作者的右眼眨动时，所述处理器控制所述鼠标实现右击功能。本专利技术的有益技术效果是：通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。。附图说明图1是本专利技术实施例的基于面部微表情的鼠标控制系统框架图。图2是本专利技术实施例的KVM装置示例图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1所示，该基于面部微表情的鼠标控制系统由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕。所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。所述处理器可以根据所述摄像头捕捉的面部眼球的偏转来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。所述处理器也可以根据所述摄像头捕捉的面部平面角度的变化来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。同时，所述处理器根据所述摄像头捕捉到的所述操作者的眼睛眨动的次数来控制所述鼠标操作，实现所述鼠标的功能。当所述摄像头捕捉到所述操作者的眼睛眨动1次时，所述处理器控制所述鼠标实现单击功能。当所述摄像头捕捉到所述操作者的眼睛眨动2次时，所述处理器控制所述鼠标实现双击功能。当所述摄像头捕捉到所述操作者眼睛眨动大于等于3次时，所述处理器不会控制所述鼠标实现功能。如图2所示，该KVM装置有一个屏幕，其上面有A1、A2、A3、A4等四个计算机桌面呈现，每个计算机桌面对应一个主机。左侧A1区域为一个计算机桌面，右侧A2、A3、A4等三个区域为三个计算机桌面，当所述操作者面部的眼球偏转向A2计算机桌面或者面部的平面偏向A2计算机桌面时，所述处理区将所述鼠标路由到A2计算机桌面。此时当所述操作者的左眼眨动2次时，A2计算机桌面的画面放大全屏；当所述操作者的左眼再次眨动2次时，A2计算机桌面的画面回到原始大小。所述处理器根据所述摄像头捕捉到的所述操作者左眼或右眼的眨动来控制所述鼠标操作，实现所述鼠标的功能。当所述摄像头捕捉到所述操作者的左眼眨动时，所述处理器控制所述鼠标实现左击功能。当所述摄像头捕捉到所述操作者的右眼眨动时，所述处理器控制所述鼠标实现右击功能。根据本专利技术实施例的一种基于面部微表情的鼠标控制系统，通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。尽管已经示出和描述了本专利技术的实施例，本领域的普通技术人员可以理解：在不脱离本专利技术的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本专利技术的范围由权利要求及其等同物限定。本文档来自技高网...

【技术保护点】
1.一种基于面部微表情的鼠标控制系统，其特征在于：所述鼠标控制系统由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。

【技术特征摘要】
1.一种基于面部微表情的鼠标控制系统，其特征在于：所述鼠标控制系统由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。2.根据权利要求1所述的基于面部微表情的鼠标控制系统，其特征在于：所述处理器根据所述摄像头捕捉的面部眼球的偏转来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。3.根据权利要求1所述的基于面部微表情的鼠标控制系统，其特征在于：所述处理器根据所述摄像头捕捉的面部平面角度的变化来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。4.根据权利要求2或3所述的基于面部微表情的鼠标控制系统，其特征在于：所述处理器根据所述摄像头捕捉到的所述操作者的眼睛眨动的次数来控制所述鼠标操作，实现所述鼠标的功能。5.根据权利要求4所述的基于面...

【专利技术属性】
技术研发人员：方华，
申请(专利权)人：广州魅视电子科技有限公司，
类型：发明
国别省市：广东,44