基于虚拟场景交互的康复训练机器人系统及其使用方法技术方案

本发明专利技术公开一种基于虚拟场景交互的康复训练机器人系统及其使用方法，包括虚拟交互场景模块、视觉信息采集模块、生理参数采集模块、力测量模块、状态监控模块、指令生成模块和康复训练机器人等部分，状态监控模块以界面显示生理参数采集模块、力测量模块测得的信息以及康复训练机器人输出的运动状态并发送给指令生成模块，指令生成模块根据状态监控模块和虚拟交互场景模块提供的信息生成控制指令并分别发回上述两模块，康复训练机器人负责实现主动康复情形下的力反馈输出和被动康复训练情形下牵引患者进行康复训练。本发明专利技术可为康复训练机器人提供一个实时、友好，具有视觉、听觉、触觉多感知反馈的虚拟场景交互系统，可以激励患者主动地康复训练。

Rehabilitation training robot system based on virtual scene interaction and using method thereof

The invention discloses a method based on the use and rehabilitation training robot system of virtual scene interaction, including virtual interactive scene module, visual information acquisition module, physiological parameter acquisition module, force measuring module, monitoring module, instruction generation module and rehabilitation training robot, state monitoring module to display physiological parameter acquisition module, power the measurement module of the measured information and rehabilitation training robot output motion state and sends them to the instruction generating module, instruction generation module respectively back above two modules according to the generated information monitoring module and virtual interactive scene module provides control instruction and rehabilitation training robot is responsible for achieving traction in patients with rehabilitation of active rehabilitation case output force feedback and passive rehabilitation training. The invention provides a real-time interactive and interactive virtual scene interactive system with visual, auditory and tactile multi sensory feedback for the rehabilitation training robot, which can motivate the patient to perform the rehabilitation training initiatively.

【技术实现步骤摘要】
基于虚拟场景交互的康复训练机器人系统及其使用方法
本专利技术涉及一种康复训练机器人技术，具体涉及一种基于虚拟场景交互的康复训练机器人系统及其使用方法。
技术介绍
康复训练机器人已成为康复医学工程与机器人领域跨学科的研究热点，而随着科技的进步，功能单一化的康复训练机器人已不能满足日益增长的康复训练的多种需要，功能更为强大的康复训练机器人系统已成为康复机器人新的发展方向。机器人辅助训练作为近十年来一种方兴未艾的智能化康复治疗技术，得到各发达国家的普遍重视。康复训练机器人不仅可以将理疗师从医患一对一甚至多对一的繁重康复过程中解放出来，而且可以对因脑卒中(中风)和脊髓损伤等引起的肢体运动功能障碍患者进行安全可靠、自适应与针对性强的康复训练，通过定量运动、实时监测可以为患者提供更加科学的康复训练模式，将运动康复疗法通过自动化康复设备付诸实践，同时将虚拟现实技术与机器人技术相结合，通过多通道的信息反馈，激励中风患者实现主动的康复训练，对于提高肢体运动功能障碍患者的康复质量、促进患者的及早康复、减轻社会负担具有重要意义。然而，现有的康复训练器机器人系统中多数缺乏情景交互能力，不利于患者积极主动地投入康复训练，而有情景交互的康复训练机器人系统中，多数仅针对康复训练机器人自身进行了简单的交互设计，交互系统由于信息捕获等原因非常依赖于自身硬件系统设计，而各个交互系统对于硬件要求并不相同，导致其移植性和拓展性非常差，同时，为了采集人体的运动信息，往往需要让患者佩戴上很多传感器设备，进而造成患者的心理抵触和身体不适。交互中仅采用视觉和听觉的现有康复训练机器人系统不足以带给患者逼真的沉浸感和交互体验，以至于不能更好地激励患者进行主动的康复训练。
技术实现思路
专利技术目的：本专利技术的目的在于解决现有技术中存在的不足，提供一种基于虚拟场景交互的康复训练机器人系统及其使用方法。技术方案：本专利技术所述的一种基于虚拟场景交互的康复训练机器人系统，包括虚拟交互场景模块、视觉信息采集模块、生理参数采集模块、力测量模块、状态监控模块、指令生成模块和康复训练机器人，其中，虚拟交互场景模块为患者提供实时的视觉和听觉交互；视觉信息采集模块由摄像头实时采集患者的体感信息并作为虚拟交互场景模块的输入；生理参数采集模块实现患者康复训练过程中的实时生理信息采集；力测量模块负责检测患者康复训练过程中与康复训练机器人之间的各向作用力；状态监控模块实时监控整个康复训练过程，同时负责汇集生理参数采集模块采集到的患者生理参数、力测量模块测得的作用力以及康复训练机器人的运动状态并以友好的人机交互界面显示；指令生成模块由医生或基于专家系统开发的决策软件根据状态监控模块提供的信息或虚拟交互场景模块提供的虚拟场景交互信息及时生成虚拟交互场景模块和康复训练机器人所需的控制指令，并拥有紧急制动指令发布等保护功能；康复训练机器人负责实现主动康复情形下的力反馈输出和被动康复训练情形下牵引患者进行康复训练。进一步的，所述虚拟交互场景模块根据患者自主意愿或者患者康复状态选择合适的场景，在虚拟交互场景中设有虚拟代理，可以实时响应患者的动作，虚拟交互场景模块根据视觉信息采集模块所采集的患者康复训练体感信息做出实时的交互响应，计算并输出虚拟代理与虚拟环境间的作用力关系，包括虚拟环境中虚拟代理的碰撞检测虚拟力信息给指令生成模块，作为生成康复训练机器人提供力反馈的指令所需的参考，并可以接收指令生成模块发出的场景或交互模式转换指令。进一步的，所述视觉信息采集模块使用Kinect摄像头采集患者的体感信息，然后通过通信连接将其发送给虚拟交互场景模块。进一步的，所述生理参数采集模块佩戴在患者身上，采集患者的生理参数，并将生理参数数据通过无线通信发送给状态监控模块。进一步的，所述力测量模块包括测力传感器和放大接口电路(可以用现有的也可以用自己设计的，没有特殊要求)，实时测量患者与康复训练机器人之间的作用力，并将作用力信息通过无线通信发送给状态监控模块。进一步的，所述状态监控模块汇集(这里意思是这个模块接收并显示很多信息)和显示患者生理参数、作用力数据以及康复训练机器人的运动状态，实时监控整个康复训练过程，并将所得信息发送给指令生成模块。进一步的，所述指令生成模块根据状态监控模块提供的信息或虚拟交互场景模块提供的虚拟场景交互信息，由医生或基于专家系统开发的决策软件及时生成虚拟交互场景模块和康复训练机器人所需的控制指令，并拥有紧急制动指令发布功能。进一步的，所述康复训练机器人实现主动康复情形下的力反馈输出和被动康复训练情形下牵引患者进行康复训练，并输出康复训练机器人的运动状态。本专利技术还公开了一种虚拟场景交互的康复训练机器人系统的使用方法，具体包括以下步骤：步骤1：患者正确使用康复训练机器人并佩戴生理参数采集模块，生理参数采集模块和视觉信息采集模块实时采集患者生理参数和体感信息并通过通信连接将其发送给虚拟交互场景模块；步骤2：虚拟交互场景模块接收视觉信息采集模块发送的信息后，实时更新虚拟交互场景，提供实时的视觉和听觉交互的同时，计算虚拟代理与虚拟环境间的作用力关系，发送给指令生成模块，作为生成康复训练机器人提供力反馈的指令所需的参考；步骤3：患者进行康复训练模式选择；(1)如果选择进行主动的康复训练模式，康复训练机器人接收指令生成模块信息，实时输出反馈力；(2)如果选择进行被动的康复训练模式，康复训练机器人根据轨迹规划牵引患者进行康复训练；步骤4：康复训练机器人输出其运动状态，力测量模块实时测量康复训练过程中患者与康复训练机器人之间各向作用力，生理参数采集模块实现患者康复训练过程中的实时生理信息采集，三者数据通过无线通信发送给状态监控模块；步骤5：状态监控模块接收力测量模块、生理参数采集模块及康复训练机器人输出的信息，以友好的人机交互界面汇集并显示，实时监控整个康复训练过程，并将所得信息发送给指令生成模块；步骤6：指令生成模块由医生或基于专家系统开发的决策软件综合状态监控模块、虚拟交互场景模块发送的信息，及时生成虚拟交互场景模块和康复训练机器人所需的控制指令，并分别发送给虚拟交互场景模块和康复训练机器人；步骤7：一次训练结束，康复训练机器人回归初始位置，各模块停止工作并断电，患者卸下生理参数采集模块。有益效果：与现有技术相比，本专利技术具有以下优点：(1)本专利技术采用实时的信息捕获、传递及控制指令生成与发布，控制过程连续、流畅，人机交互及时、友好，系统可实现稳定、安全的康复训练过程；(2)本专利技术采用模块化的设计思路，在分析现有康复训练需要的基础上，设计了相关模块，并采用视觉方法采集患者的体感信息作为系统的输入信号，使得该系统不仅具有自身的扩展性，还使得本专利技术可以运用在更多的现有康复训练机器人上，可以非常方便地以很低的改造成本为康复训练机器人系统扩展相关功能；(3)本专利技术中患者康复训练过程中可实时接收到多感官反馈：视觉、听觉和力触觉等，相比大多数康复机器人，所添加的力触觉反馈可以让患者康复训练过程中提高虚拟交互的沉浸感、真实感体验，人机交互方式友好、多样，可刺激患者进行主动的康复训练，提高康复训练效率，增强康复训练效果；(4)本专利技术可实现患者康复训练过程中的多种相关参数监控，可进行安全可靠、自适应与针对性强的康复训练，本文档来自技高网...

【技术保护点】
一种基于虚拟场景交互的康复训练机器人系统，其特征在于：包括虚拟交互场景模块、视觉信息采集模块、生理参数采集模块、力测量模块、状态监控模块、指令生成模块和康复训练机器人，其中，虚拟交互场景模块为患者提供实时的视觉和听觉交互；视觉信息采集模块由摄像头实时采集患者的体感信息并作为虚拟交互场景模块的输入；生理参数采集模块实现患者康复训练过程中的实时生理信息采集；力测量模块负责检测患者康复训练过程中与康复训练机器人之间的各向作用力；状态监控模块实时监控整个康复训练过程，同时负责汇集生理参数采集模块采集到的患者生理参数、力测量模块测得的作用力以及康复训练机器人的运动状态并以友好的人机交互界面显示；指令生成模块由医生或基于专家系统开发的决策软件根据状态监控模块提供的信息或虚拟交互场景模块提供的虚拟场景交互信息及时生成虚拟交互场景模块和康复训练机器人所需的控制指令，并拥有紧急制动指令发布等保护功能；康复训练机器人负责实现主动康复情形下的力反馈输出和被动康复训练情形下牵引患者进行康复训练。

【技术特征摘要】
1.一种基于虚拟场景交互的康复训练机器人系统，其特征在于：包括虚拟交互场景模块、视觉信息采集模块、生理参数采集模块、力测量模块、状态监控模块、指令生成模块和康复训练机器人，其中，虚拟交互场景模块为患者提供实时的视觉和听觉交互；视觉信息采集模块由摄像头实时采集患者的体感信息并作为虚拟交互场景模块的输入；生理参数采集模块实现患者康复训练过程中的实时生理信息采集；力测量模块负责检测患者康复训练过程中与康复训练机器人之间的各向作用力；状态监控模块实时监控整个康复训练过程，同时负责汇集生理参数采集模块采集到的患者生理参数、力测量模块测得的作用力以及康复训练机器人的运动状态并以友好的人机交互界面显示；指令生成模块由医生或基于专家系统开发的决策软件根据状态监控模块提供的信息或虚拟交互场景模块提供的虚拟场景交互信息及时生成虚拟交互场景模块和康复训练机器人所需的控制指令，并拥有紧急制动指令发布等保护功能；康复训练机器人负责实现主动康复情形下的力反馈输出和被动康复训练情形下牵引患者进行康复训练。2.根据权利要求1所述的基于虚拟场景交互的康复训练机器人系统，其特征在于：所述虚拟交互场景模块根据患者自主意愿或者患者康复状态选择合适的场景，在虚拟交互场景中设有虚拟代理，能够实时响应患者的动作，虚拟交互场景模块根据视觉信息采集模块所采集的患者康复训练体感信息做出实时的交互响应，计算并输出虚拟代理与虚拟环境间的作用力关系，包括虚拟环境中虚拟代理的碰撞检测虚拟力信息给指令生成模块，作为生成康复训练机器人提供力反馈的指令所需的参考，并可以接收指令生成模块发出的场景或交互模式转换指令。3.根据权利要求1所述的基于虚拟场景交互的康复训练机器人系统，其特征在于：所述视觉信息采集模块使用Kinect摄像头采集患者的体感信息，然后通过通信连接将其发送给虚拟交互场景模块。4.根据权利要求1所述的基于虚拟场景交互的康复训练机器人系统，其特征在于：所述生理参数采集模块佩戴在患者身上，采集患者的生理参数，并将生理参数数据通过无线通信发送给状态监控模块。5.根据权利要求1所述的基于虚拟场景交互的康复训练机器人系统，其特征在于：所述力测量模块包括测力传感器和放大接口电路，实时测量患者与康复训练机器人之间的作用力，并将作用力信息通过无线通信发送给状态监控模块。6.根据权利要求1所述的基于虚拟场景交互的康复训练机器人系统，其特...

【专利技术属性】
技术研发人员：宋爱国，秦超龙，石珂，唐心宇，李会军，曾洪，徐宝国，
申请(专利权)人：东南大学，
类型：发明
国别省市：江苏,32