A natural movement controller identifies various movements of one or more parts of a user's body to interact with an electronic device, thereby implementing various natural user interface (NUI) scenarios. A natural movement controller constructs a composite motion recognition window by adjusting an adjustable number of time slots of inertial sensor data received from a plurality of separate inertial sensor sets. Moving each inertial sensor inertial sensor concentration of these separate set is coupled to a separate user wearing, carrying or handheld computing devices, or provide with a separate user wearing, carrying or handheld mobile computing device for sensor data. Each compound motion recognition window is then passed to a motion recognition model trained by one or more machine based depth learning processes. The motion recognition model is then applied to a composite motion recognition window to identify sequences of one or more predefined motions. The identified movement is then used as a basis for triggering the execution of one or more application commands.
【技术实现步骤摘要】
【国外来华专利技术】经由可穿戴和移动设备的基于自然运动的控制
技术介绍
智能手表和其他可穿戴或移动计算设备提供各种水平的计算功能。这样的功能实现各种任务,诸如语音或数据通信、数据存储和传送、计算、媒体记录或回放、游戏、健康跟踪等。从硬件视角,许多智能手表和其他可穿戴或移动设备包括各种各样的传感器,诸如照相机、麦克风、扬声器、加速度计、显示设备、触敏表面等。智能手表和其他可穿戴或移动设备通常运行各种操作系统并且常常运行各种应用中的任一个应用。许多这些设备还使用一些技术(诸如Wi-Fi、蓝牙、近场通信(NFC)等)提供与其他计算设备的无线连接性或交互性。
技术实现思路
提供以下概述以引入以在下文详细描述中进一步描述的简化形式的概念的选择。该概述不旨在标识所要求保护的主题的关键特征或基本特征,其也不旨在用作辅助确定所要求保护的主题的范围。进一步,虽然本文可以指出或讨论现有技术的某些缺点,但是所要求保护的主题不旨在被限于可以解答或解决那些现有技术的缺点中的任何或全部缺点的实现。该概述的唯一目的是以简化形式将所要求保护的主题的一些概念呈现作为稍后呈现的更详细描述的前序。通常,如本文所描述的“自然运动控制器”提供用于标识用户的身体的一个或多个部分的运动以与电子设备交互的技术,从而使能各种自然用户接口(NUI)场景。有利地,自然运动控制器通过响应于用户的身体的一个或多个部分的所标识的一个或多个预定义运动的序列而触发一个或多个应用命令的序列的执行,来提供关于各种各样的计算设备和电子地控制或致动的设备或机器的增加的用户生产率和交互性。这些运动基于惯性传感器数据被标识、可选地与其他传感器数据(例如,光学、 ...
【技术保护点】
一种计算机实现的方法,包括:通过连结从一个或多个分离的惯性传感器集接收到的惯性传感器数据的可调整数目的顺序时段来构建复合运动识别窗口,每个分离的惯性传感器集被耦合到多个用户穿戴控制设备中的分离的用户穿戴控制设备;将所述复合运动识别窗口传递到由一个或多个基于机器的深度学习过程训练的运动识别模型;将所述运动识别模型应用到所述复合运动识别窗口以标识一个或多个用户身体部分的一个或多个预定义运动的序列;以及响应于所标识的所述一个或多个预定义运动的序列,触发一个或多个应用命令的序列的执行,由此通过使得用户能够通过执行身体部分运动与计算设备交互来增加用户交互性能和效率。
【技术特征摘要】
【国外来华专利技术】2014.09.30 US 14/502,5491.一种计算机实现的方法,包括:通过连结从一个或多个分离的惯性传感器集接收到的惯性传感器数据的可调整数目的顺序时段来构建复合运动识别窗口,每个分离的惯性传感器集被耦合到多个用户穿戴控制设备中的分离的用户穿戴控制设备;将所述复合运动识别窗口传递到由一个或多个基于机器的深度学习过程训练的运动识别模型;将所述运动识别模型应用到所述复合运动识别窗口以标识一个或多个用户身体部分的一个或多个预定义运动的序列;以及响应于所标识的所述一个或多个预定义运动的序列,触发一个或多个应用命令的序列的执行,由此通过使得用户能够通过执行身体部分运动与计算设备交互来增加用户交互性能和效率。2.根据权利要求1所述的计算机实现的方法,进一步包括:响应于从一个或多个用户的所述控制设备接收到的传感器数据,周期性地重新训练所述运动识别模型。3.根据权利要求2所述的计算机实现的方法,其中重新训练所述运动识别模型在与个体用户的所述用户穿戴控制设备相关联的所述运动识别模型的本地复制的每用户基础上被执行。4.根据权利要求1或权利要求2或权利要求3所述的计算机实现的方法,其中所述多个用户穿戴控制设备中的至少一个用户穿戴控制设备是腕戴式控制设备,并且其中所述一个或多个预定义运动的序列包括所述用户的手腕的扭转。5.根据权利要求4所述的计算机实现的方法,其中所述用户的手腕的所述扭转触发通信设备的通信会话的执行。6.根据权利要求1或权利要求2或权利要求3或权利要求4或权利要求5所述的计算机实现的方法,其中两个或更多个不同的用户之间的、一个或多个用户身体部分的所述运动之间的同步的标识触发所述一个或多个应用命令的序列的所述执行。7.根据权利要求6所述的计算机实现的方法,其中所述同步通过比较与所述两个或更多个不同的用户的所述复合运动识别窗口相关联的时间戳而被标识。8.根据权利要求6或权利要求7所述的计算机实现的方法,其中跟随确定所述两个或更多个用户的所述用户穿戴控制设备在其他用户中的至少一个用户的所述用户穿戴控制设备中的至少一个用户穿戴控制设备的最小阈值距离内,所述同步被标识。9.一种系统,包括:通用计算设备;以及计算机程序,其包括由所述计算设备可执行的程序模块,其中所述计算设备由所述计算机程序的所述程序模块引导以:从加速度和角速度数据的一个或多个顺序时段提取特征,所述加速度和角速度数据从一个或多个分离的惯性传感器集被接...
【专利技术属性】
技术研发人员:王嘉平,李宇佳,黄学东,吴凌峰,熊炜,姚开盛,G·茨威格,
申请(专利权)人:微软技术许可有限责任公司,
类型:发明
国别省市:美国,US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。