一种用于确定智能设备的人机交互信息的方法与设备技术

本申请的目的是提供一种用于确定智能设备的人机交互信息的方法，该方法包括：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。本申请可以给与用户与敲打实际键盘一样的友好感受，提升了用户的体验。

A Method and Equipment for Determining Human-Computer Interactive Information of Intelligent Equipment

The purpose of this application is to provide a method for determining human-computer interaction information of intelligent devices. The method includes: acquiring finger motion information of a user in the process of human-computer interaction; determining corresponding human-computer interaction information based on the mapping relationship between the corresponding virtual keyboard and the user's finger, and the finger motion information, in which the human-computer interaction information includes: Describes the virtual key information of the moving finger in the user's finger. This application can give the user the same friendly feeling as typing the actual keyboard, and enhance the user's experience.

【技术实现步骤摘要】
一种用于确定智能设备的人机交互信息的方法与设备
本申请涉及通信领域，尤其涉及一种用于确定智能设备的人机交互信息的技术。
技术介绍
当前智能设备(例如，智能眼镜或头戴式显示设备)中，现有的主流输入方式主要有语音识别、手势识别、头部转动跟踪、触摸板和外接键盘等。与其它输入方式相比较，键盘无疑是最可靠的输入方式，然而，智能眼镜或是其它头戴式显示设备的优点之一是方便移动，如果外接键盘，那么该优点将大打折扣。
技术实现思路
本申请的一个目的是提供一种用于确定智能设备的人机交互信息的方法与设备。根据本申请的一个方面，提供了一种用于确定智能设备的人机交互信息的方法，该方法包括：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。根据本申请的一个方面，提供了一种用于确定智能设备的人机交互信息的设备，该设备包括：第一一模块，用于获取人机交互过程中关于用户手指的手指运动信息；第一二模块，用于基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。根据本专利技术的一个方面，提供了一种用于确定智能设备的人机交互信息的设备，其中，该设备包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。根据本专利技术的一个方面，提供了存储指令的计算机可读介质，所述指令在被执行时使得系统进行：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。与现有技术相比，本申请中智能设备获取用户手指的手指运动信息后，基于用户手指与虚拟键盘的映射关系确定对应的人机交互信息，在本申请中，用户在通过输入装置获取人机交互信息时不需要将手放在特定位置，这种方式不受外界环境变化影响，不仅输入速度快，准确率高，而且用户可以得到与敲打实际键盘一样的友好体验。同时，通过在虚拟键盘输入获取人机交互信息时，用户可以实时清楚的看到自己手指变化以及虚拟键盘中对应的输入内容，当用户通过可视化的虚拟键盘和虚拟手指发现选择错误时，可以调整自己实际的手势，从而提高输入准确性。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1示出根据本申请的一个系统拓扑图；图2示出根据本申请一个实施例的一种用于确定智能设备的人机交互信息的方法流程图；图3示出根据本申请一个实施例的一种用于确定智能设备的人机交互信息的设备示意图；图4示出可被用于实施本专利技术中所述各个实施例的示例性系统。附图中相同或相似的附图标记代表相同或相似的部件。具体实施方式下面结合附图对本申请作进一步详细描述。在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(例如，中央处理器(CentralProcessingUnit，CPU))、输入/输出接口、网络接口和内存。内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RandomAccessMemory，RAM)和/或非易失性内存等形式，如只读存储器(ReadOnlyMemory，ROM)或闪存(FlashMemory)。内存是计算机可读介质的示例。计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(Phase-ChangeMemory，PCM)、可编程随机存取存储器(ProgrammableRandomAccessMemory，PRAM)、静态随机存取存储器(StaticRandom-AccessMemory，SRAM)、动态随机存取存储器(DynamicRandomAccessMemory，DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-ErasableProgrammableRead-OnlyMemory，EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CompactDiscRead-OnlyMemory，CD-ROM)、数字多功能光盘(DigitalVersatileDisc,DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互(例如通过触摸板进行人机交互)的移动电子产品，例如智能手机、平板电脑等，所述移动电子产品可以采用任意操作系统，如Android操作系统、iOS操作系统等。其中，所述网络设备包括一种能够按照事先设定或存储的指令，自动进行数值计算和信息处理的电子设备，其硬件包括但不限于微处理器、专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、可编程逻辑器件(ProgrammableLogicDevice，PLD)、现场可编程门阵列(FieldProgrammableGateArray，FPGA)、数字信号处理器(DigitalSignalProcessor，DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云；在此，云由基于云计算(CloudComputing)的大量计算机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(AdHoc网络)等。优选地，所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。当然，本领域技术人员应能理解上述设备仅为举例，其他现有的或今后可能出现的设备如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。在本申请的描述中，“多个”的含义是两个或者更多，除非另有明确具体的限定。图1示出了本申请的一个典型场景，用户佩戴着手指运动检测设备，例如，该设备通过传感器(例如，陀螺仪、加速度计等)获取用户手指的传感信息并传输至智能设备，其中，智能设备包括但不限于AR设备、VR设备、智能手机以及平板电脑等具有显示屏幕的计算设备。智能设备接收用户手指的传感信息，并基于与手指运动检测设备对应的算法获取手指运动信息(例如，手指向前、后、左、右的移动或者摆动信息，手指的弯曲、本文档来自技高网...

【技术保护点】
1.一种用于确定智能设备的人机交互信息的方法，其中，该方法包括：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。

【技术特征摘要】
1.一种用于确定智能设备的人机交互信息的方法，其中，该方法包括：获取人机交互过程中关于用户手指的手指运动信息；基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。2.根据权利要求1所述的方法，其中，所述方法还包括：基于用户的设置，建立或更新所述虚拟键盘与所述用户手指的映射关系。3.根据权利要求1所述的方法，其中，所述方法还包括：呈现所述虚拟键盘。4.根据权利要求3所述的方法，其中，所述方法还包括：基于所述虚拟键盘与所述用户手指的映射关系在所述虚拟键盘对应位置呈现虚拟手指。5.根据权利要求4所述的方法，其中，所述方法还包括：基于所述手指运动信息，实时调整所述虚拟手指在所述虚拟键盘中的位置。6.根据权利要求4所述的方法，其中，所述方法还包括：基于所述用户手指中运动手指的虚拟按键信息，调整并呈现所述虚拟手指。7.根据权利要求3至6中任一项所述的方法，其中，所述方法还包括：基于所述用户手指中运动手指的虚拟按键信息，在所述虚拟键盘中突出显示所述运动手指对应的按键区域。8.根据权利要求3至6中任一项所述的方法，其中，所述方法还包括：基于所述手指运动信息，在所述虚拟键盘中突出显示对应的按键区域。9.根据权利要求1所述的方法，其中，所述获取人机交互过程中关于用户手指的手指运动信息，包括：接收人机交互过程中处于使用状态下的手指运动检测设备采集的关于用户手指的传感数据信息；根据所述传感数据信息确定所述用户手指的手指运动信息。10.根据权利要求1所述的方法，其中，所述获取人机交互过程中关于用户手指的手指运动信息，包括：接收人机交互过程中处于使用状态下的手指运动检测设备采集的关于用户手指的手指运动信息。11.根据权利要求9或10所述的方法，其中，所述手指运动检测设备包括以下至少一项：运动检测手环；运动检测手套；运动检测指环；运动检测臂环。12.根据权利要求1所述的方法，其中，所述基于对应的虚拟键盘与所述用户手指的映射关系，及所述手指运动信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息，包括：基于所述手指运动信息确定所述用户手指中运动手指及运动手指的运动向量信息；基于对应的虚拟键盘与所述用户手指的映射关系、所述运动手指及所述运动向量信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息。13.根据权利要求12所述的方法，其中，所述基于所述手指运动信息确定所述用户手指中运动手指及运动手指的运动向量信息，包括：基于所述手指运动信息确定所述用户手指中每个手指的相对运动向量信息；将所述用户手指中各手指相对运动向量的垂直分量中最大的垂直分量对应的用户手指作为对应的运动手指，并将该手指的相对运动向量信息作为所述运动手指的运动向量信息。14.根据权利要求12所述的方法，其中，所述基于所述手指运动信息确定所述用户手指中运动手指及运动手指的运动向量信息，包括：基于所述手指运动信息确定所述用户手指中每个手指的相对运动向量信息；若存在手指的相对运动向量信息的垂直分量大于或等于预设按键阈值，将该手指作为对应的运动手指，并将该手指的相对运动向量信息作为所述运动手指的运动向量信息。15.根据权利要求13或14所述的方法，其中，所述基于对应的虚拟键盘与所述用户手指的映射关系、所述运动手指及所述运动向量信息确定对应的人机交互信息，其中，所述人机交互信息包括所述用户手指中运动手指的虚拟按键信息，包括：基于所述虚拟键盘与所述用户手指的映射关系信息、所述运动手指确定对应的虚拟按键区域；根据所述运动手指的运动向量信息及所述虚拟按键区域确定对应的人机交互信息...

【专利技术属性】
技术研发人员：胡军，张建伟，刘霞，
申请(专利权)人：亮风台上海信息科技有限公司，
类型：发明
国别省市：上海,31