人机交互方法和舌训练系统技术方案

本申请涉及人机交互领域，提供了一种基于人机界面的人机交互方法和舌训练系统，该人机交互方法包括如下步骤：监测设置于用户口腔内的传感器所反馈的来自舌头的触碰信号；根据所反馈的触碰信号，在人机界面上显示反馈结果。该舌训练系统，包括：终端，终端上显示有人机界面；传感器，设置于用户的口腔内，用于反馈来自用户舌头的触碰信号，传感器与终端通信连接；终端根据所反馈的触碰信号，在人机界面上显示反馈结果。本申请的实施方式极大地丰富了应用程序和电子游戏的操控感，提高了用户使用体验。

Man-machine interaction method and tongue training system

【技术实现步骤摘要】
人机交互方法和舌训练系统
本专利技术涉及人机交互领域，特别涉及一种人机交互方法和舌训练系统。
技术介绍
人机交互(Human-ComputerInteraction,简写HCI)：是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。随着虚拟现实技术、增强现实技术的演进，人机交互的方式在传统的键鼠操作、近十年来风靡一时的触屏操作的技术上也有了不少新的突破，形成了更多种类的体感操作方式。例如，基于动作捕捉技术，通过获取用户的手势，身体摆动动作而产生的操作方式，以及基于人工智能识别技术，通过获取用户的面部表情、眼神而形成的操作方式等等。
技术实现思路
在本申请的一个实施方式中，提供了一种人机交互方法，基于人机界面，包括如下步骤：监测设置于用户口腔内的传感器所反馈的来自舌头的触碰信号；根据所反馈的触碰信号，在人机界面上显示反馈结果。本申请的实施方式在帮助用户训练舌头的运动，提高舌头的灵活性的同时，提供了一种崭新的人机交互方式。该人机交互方法借助设置在用户的口腔内的传感器获取用户的舌头的运动状态，从而能够在人机界面上反馈出用户舌头运动的交互结果，因此用户能够通过舌头操控应用程序或游戏，提高使用的趣味性，新的体感交互方式还能够给用户带来沉浸感，提高了用户使用体验。在本申请的另一个实施方式中，还提供了一种舌训练系统，包括：终端，终端上显示有人机界面；传感器，设置于用户的口腔内，用于反馈来自用户舌头的触碰信号，传感器与终端通信连接；终端根据所反馈的触碰信号，在人机界面上显示反馈结果。本申请的实施方式借助设置在用户的口腔内的传感器获取用户的舌头的运动状态，从而能够在人机界面上反馈出与用户舌头运动的交互结果。在提供了一种崭新的人机交互方式的同时，还能够帮助用户训练舌头的运动，提高舌头的灵活性。附图说明为了更清楚地说明本申请实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图推导出其他的附图中未出现的关联结构。图1是本申请第一实施方式提供的人机交互方法的流程图；图2是本申请第一实施方式提供的舌训练系统的模块框图；图3是本申请第二实施方式提供的舌训练系统在装入口腔内时的示意图；图4是本申请第二实施方式提供的舌训练系统的立体示意图；图5是本申请第二实施方式提供的舌训练系统在装入口腔内时，人体的截面示意图。附图标记说明：1-传感器；2-数据传输组件；3-支架；31-固定部；311-咬合槽；32-贴附部；4-供电组件。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。实施方式一本申请的实施方式提供了一种人机交互方法和舌训练系统。现有技术的人机交互通常根据用户的体感操作计算机等设备，例如，通过用户的手势、肢体行为、眼睑动作等产生的操作方式。这些交互方式极大地丰富了应用程序和电子游戏的操控感。本申请基于现有技术，进一步提出了一种新型的操控方式。参见图1所示，在本申请的第一实施方式中提供了一种人机交互方法，包括如下步骤：监测设置于用户口腔内的传感器1所反馈的来自舌头的触碰信号；根据所反馈的触碰信号，在人机界面上显示反馈结果。一种舌训练系统，参见图2所示，包括：终端，终端上显示有人机界面；传感器1，设置于用户的口腔内，用于反馈来自用户舌头的触碰信号，传感器1与终端通信连接；终端根据所反馈的触碰信号，在人机界面上显示反馈结果。其中，触碰信号可以根据用户舌头的舌位及肌力等反应情况产生。本申请的实施方式提出了一种新型的交互方式，人机界面能够根据用户舌头的触碰信号显示反馈结果，极大地丰富了交互体验，例如，人们可以通过舌头操控应用程序和电子游戏，提升了趣味性和操控感。特别地，对于失去双手的残障人士，可以通过舌头操控智能设备，以减少残障人士使用智能设备方面的障碍，改善其社交条件。当然，在实际操作时，还可以配合使用现有技术中的视觉跟踪技术、动作捕捉技术等，以提高反馈的准确性和使用的便利性。在本实施方式中，终端可以是有线终端或无线终端。无线终端可以是具有无线连接能力的手持式设备、计算设备、或连接到无线调制解调器的其他处理设备。通常，用户的终端可以是个人计算机或移动终端，以移动终端中的手机、平板电脑为优选方案。其中，传感器1可以与终端通过无线通信的方式连接，例如，可以借助蓝牙、Wlan、NFC的方式进行连接，以提高用户使用时的便利性。为了提高使用的可靠性，舌训练系统还可以包括数据传输组件2和供电组件4，数据传输组件2可以与传感器1通信连接，且与终端通信连接；供电组件4可以与传感器1和数据传输组件2分别电连接。其中，数据传输组件2和供电组件4可以分立设置。当然，数据传输组件2和供电组件4也可以合并设置在用户牙列的外侧，以防止对用户的口腔开闭动作形成干扰。优选地，数据传输组件2和供电组件4可以由一个盒体包裹。盒体上可以设置有防水盖，防水盖通过螺栓可拆卸地盖在盒体上，在防水盖和供电盒的本体之间还设置有密封圈。通过所设置的盒体可以对供电组件4进行隔水处理，并便于更换电池。盒体还可以固定连接在用户的牙齿上，并跟随用户的一侧牙齿上下运动，提高了灵活性。另外，供电组件4内的电池还可以是运动充电电池。在供电组件4跟随牙齿上下运动的过程中，可以对电池本身进行充电，如此一来，还可以省去防水结构，将供电组件4和数据传输组件2完全密封，提高便利性和安全性。值得一提的是，本实施方式人机交互方法在应用过程中不仅限于上述的硬件，在此不作赘述。根据传感器1所反馈的触碰信号，在人机界面上能够显示反馈结果，因此本实施方式能够通过舌部的锻炼使得舌头更加灵活，在实际训练时，人机界面所显示的反馈结果能够监视用户的舌部锻炼情况，因此用户能够直观地监测到舌训练的状态，提高用户锻炼的积极性。特别地，还能够满足更深层次的用户需求，例如学习外语发音、练习声乐等，另外还可以提供给部分舌切除术后的舌癌患者，以用于舌肌恢复训练。因此在本实施方式中，传感器1可以被设置在口腔内的任意的在进行舌运动训练时舌头需触发的部位，典型地，如腭、前牙腭舌面等区域。其中，传感器1可以是生物电信号传感器，以用于检测舌头的生物电信号，或者，传感器1可以是触发开关，检测到舌头按压到触发开关时发出信号，其他还可以包括一些辅助性的传感器，例如温度传感器，湿度传感器等等。以触发开关为例，当用户在进行舌部锻炼时，舌头每次按压触发开关，都可以向数据传输组件2发出触发信号。同时，数据传输组件2将信号反馈至外部的终端，即可通过终端获取训练的状态。以学习外语发音为例，在学习小语种(例如意大利语、俄语、西班牙语等)时，需要进行弹舌训练，其中一种训练方式是：舌尖需要抵持在牙槽嵴(上牙根牙龈凸起部位)，且尽量不要接触到切牙；与此同时，舌头需要伸直并微微向两侧摊开，与周围的牙本文档来自技高网...

【技术保护点】
1.一种人机交互方法，基于人机界面，其特征在于，包括如下步骤：监测设置于用户口腔内的传感器所反馈的来自舌头的触碰信号；根据所反馈的触碰信号，在所述人机界面上显示反馈结果。

【技术特征摘要】
1.一种人机交互方法，基于人机界面，其特征在于，包括如下步骤：监测设置于用户口腔内的传感器所反馈的来自舌头的触碰信号；根据所反馈的触碰信号，在所述人机界面上显示反馈结果。2.根据权利要求1所述的人机交互方法，其特征在于，所述人机界面上显示有：主体，所述主体在所述人机界面中被显示为相对周围环境不断运动；障碍物，出现于所述主体的运动方向之前；所述主体响应于所反馈的触碰信号，改变自身的相对运动方向以躲避所述障碍物。3.根据权利要求1所述的人机交互方法，其特征在于，所述传感器为多个，所述人机界面上显示有：若干个对象，所述对象与所述传感器的数量相同且一一对应；所述对象响应于所对应的传感器所发来的触碰信号，改变自身的显示状态。4.根据权利要求3所述的人机交互方法，其特征在于，所述人机界面上还显示有：提示控件，所述提示控件用于提示用户接下来所需触碰的对象。5.根据权利要求3或4所述的人机交互方法，其特征在于，所...

【专利技术属性】
技术研发人员：钱丽雯，钱玉芬，张哲谌，
申请(专利权)人：上海交通大学医学院附属第九人民医院，
类型：发明
国别省市：上海,31