通过网络感知用户动作的系统和方法技术方案

公开了一种通过网络感知用户动作的系统和方法，该系统包括：表面肌电传感器，在网络一侧采集第一用户的动作产生的肌电信号；识别模块，根据所述肌电信号识别所述第一用户的动作；以及机械活动部件，根据所识别的动作执行相应的动作，从而使得位于网络另一侧的第二用户感知所述第一用户的动作。还公开了一种根据由用户动作产生的肌电信号识别所述用户动作的系统、装置和方法。

【技术实现步骤摘要】

本申请涉及网络中的用户间交互，更具体地，涉及通过网络感知用户动作的系统 和方法。
技术介绍
在传统的网络通信中，用户之间主要通过文字、图像、语音等多媒体信息来进行交 流。然而，现有的通信平台并不能通过网络使用户感知到网络另一端用户的肢体动作。
技术实现思路
根据本申请的第一方面，公开了一种通过网络感知用户动作的系统，包括表面肌 电传感器，在网络一侧采集第一用户的动作产生的肌电信号；识别模块，根据所述肌电信号 识别所述第一用户的动作；以及机械活动部件，根据所识别的动作执行相应的动作，从而使 得位于网络另一侧的第二用户感知所述第一用户的动作。根据本申请的第二方面，公开了一种通过网络感知用户动作的方法，包括从位于 网络一侧的第一用户采集由所述第一用户的动作产生的肌电信号；根据所述肌电信号识别 所述第一用户的动作；根据识别出的动作生成相应的控制指令；以及响应于所述控制指令 在网络另一侧执行所述动作，从而使得位于网络另一侧的第二用户感知所述第一用户的动 作。根据本申请的第三方面，公开了一种根据由用户动作产生的肌电信号识别所述用 户动作的系统，包括表面肌电传感器，采集响应于用户的动作产生的肌电信号；以及识别 模块，包括特征提取单元，从所述肌电信号中提取特征信号；以及模式识别单元，根据预 先存储的多个数据样本识别出与提取的特征信号对应的动作，所述多个数据样本中的每一 个包括一个特征信号集群和相应的动作指示。根据本申请的第四方面，公开了一种根据由用户动作产生的肌电信号识别所述 用户动作的装置，包括特征提取单元，从所述肌电信号中提取特征信号；以及模式识别单 元，根据预先存储的多个数据样本识别出与提取的特征信号对应的动作，所述多个数据样 本中的每一个包括一个特征信号集群和相应的动作指示。根据本申请的第五方面，公开了一种根据由用户动作产生的肌电信号识别所述用 户动作的方法，包括从所述肌电信号中提取特征信号；将所提取特征信号与预先存储的 多个数据样本进行比较；以及根据比较结果，识别所述肌电信号对应的用户动作，其中，所 述多个数据样本中的每一个包括一个特征信号集群和相应的动作指示。附图说明图1示意性地示出了根据本申请的一个实施方式通过网络感知用户动作的系统。图2示意性地示出了根据本申请一个实施方式的SEMG传感器的示意框图。图3示意性地示出了根据本申请的一个实施方式的识别模块。图4示意性地示出了采用时域方法从具有六个通道的SEMG传感环采集到的肌电 信号中提取出的平方和特征。图5示意性地示出了基于短时傅里叶变换从具有六个通道的SEMG传感环采集到 的肌电信号中提取出的平方和特征。图6示意性地示出了采用主成分分析法将提取的特征信号投影在二维平面得到 的降维的特征信号。图7示意性地示出了通过学习得到的在二维平面代表几个不同动作的特征信号集群ο图8示意性地示出了根据本申请的一个实施方式的机械手。图9示意性地示出了图8的机械手中的手指结构。图IOa和IOb分别示出了图9的手指转动前后的示意图。图11示意性地示出了根据本申请一个实施方式通过网络感知用户动作的方法的 流程图。具体实施例方式下面，参照附图对本申请的示例性实施方式进行详细描述。图1示出了根据本申请的一个实施方式通过网络(例如，局域网、广域网、有线网 络、无线网络、3G网络等)感知用户动作的系统100。如图所示，系统100包括分别由用户 10和20操作的、通过网络通信的终端11和21。终端11和21可以是网络中任何适当的通 信终端，例如，个人计算机、笔记本电脑、移动电话、个人数字助理等。系统100还包括与用 户10和终端11通信的SEMG(surfaceelectromyography，表面肌电)传感器12、以及与用 户20和终端21通信的机械活动部件23。SEMG传感器12由用户10佩戴在皮肤表面。用户在进行肢体动作时，其肌肉会伸 缩，并且会有微弱的电能量聚集在对应位置处的皮肤表面。因此，响应于用户10的肢体动 作，佩戴在其皮肤表面的SEMG传感器12检测到对应皮肤位置下的肌肉伸缩运动以及由此 产生的电信号(即，肌电信号)。SEMG传感器12通过有线接口或例如蓝牙等无线接口将检 测到的肌电信号传递给终端11。根据一个实施方式，终端11包括根据接收的肌电信号识别用户10的动作的识别 模块(未示出)，并通过网络将表示识别出的动作的信息传送给终端21。终端21包括指令 生成模块(未示出)，该指令生成模块根据接收的信息生成用于控制机械活动部件23的控 制指令。机械活动部件23根据来自终端21的控制指令为用户20再现与用户10的动作相 一致的动作。机械活动部件23可以通过有线或无线接口与终端21相连。根据另一实施方式，终端11将接收到的肌电信号直接传送给终端21。终端21包 括根据肌电信号识别用户10的动作的识别模块和根据识别出的动作生成控制指令的指令 生成模块。机械活动部件23根据来自终端21的控制指令为用户20再现与用户10的动作 相一致的动作。可选地，终端11包括对接收到的肌电信号进行调制的调制模块，终端21相 应地包括解调模块，用于对接收到的调制信号进行解调以恢复SEMG传感器12发送的肌电 信号。根据又一实施方式，终端11包括根据肌电信号识别用户10的动作的识别模块和根据识别出的动作生成控制指令的指令生成模块，并将生成的控制指令传送给终端21。终 端21将接收的控制指令转发给机械活动部件23。机械活动部件23根据终端21转发的控 制指令为用户20再现与用户10的动作相一致的动作。由于肌电信号通常具有微弱的电压(例如，几微伏到几毫伏)并且混杂有大量的 噪声，因此通常需要在SEMG传感器中对采集的肌电信号进行放大和滤波。图2示出了根据 本申请一个实施方式的SEMG传感器12的示意框图。如图所示，SEMG传感器12包括从用 户的皮肤表面采集肌电信号的多个电极201、将采集的肌电信号进行放大的放大器202、以 及将放大后的肌电信号中的不期望分量滤除的滤波器203。放大器202例如可以是将肌电 信号放大到几伏的差分放大器。由于有用的肌电信号分布在20Hz到500Hz之间，并且肌电 信号中可能存在50Hz的工频噪声，因此，滤波器203可以由将频率低于20Hz的噪声滤除的 高通滤波器、将频率高于500Hz的噪声滤除的低通滤波器、以及将频率为50Hz的噪声滤除 的带阻滤波器共同构成。在一个实施例中，SEMG传感器12是用来检测人手动作的手腕式SEMG传感环。由 于人手的五个手指由前臂的四块肌肉控制，因此，在手腕式SEMG传感环中，可具有至少四 个电极，每个电极的电通道用来检测一块肌肉的伸缩产生的肌电信号。作为一种选择，SEMG 传感器12可具有六个电极，以确保当用户将其佩戴在手腕上时，这六个电极能充分覆盖四 块肌肉所对应的皮肤位置，从而避免由于电极与肌肉位置错位而丢失动作信息。图3示出了根据本申请的一个实施方式的识别模块30。识别模块30位于终端11 或21中，并可包括特征提取单元301、样本存储单元302和模式识别单元303。样本存储单元302预先存储有多个数据样本，每个样本包括一个特征信号和与之 对应的动作指示。存储的数据样本可以是经过学习和训练得到的。特征提取单元301从接本文档来自技高网...

【技术保护点】
一种通过网络感知用户动作的系统，包括：表面肌电传感器，在网络一侧采集第一用户的动作产生的肌电信号；识别模块，根据所述肌电信号识别所述第一用户的动作；以及机械活动部件，根据所识别的动作执行相应的动作，从而使得位于网络另一侧的第二用户感知所述第一用户的动作。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：刘云辉，
申请(专利权)人：香港中文大学，
类型：发明
国别省市：HK[中国|香港]