一种基于手势识别的医学模型交互可视化方法及系统技术方案

本发明专利技术提供一种基于手势识别的医学模型交互可视化方法及系统，该方法包括：对操作者进行图像采集，捕捉操作者的手部动作视觉图像；采用预设手势分割算法，对捕捉到的手部动作视觉图像进行手势分割；基于手部动作视觉图像的手势分割结果，分析操作者手势的变化；根据操作者手势的变化，对被操作的医学模型进行实时控制。本发明专利技术的基于手势识别的医学模型交互可视化方法及系统将三维重建与手势识别相结合，使图像处理技术和人机交互技术在医疗领域得到了进一步的发展，可用于利用手势控制的方式展示医学三维模型。

【技术实现步骤摘要】
一种基于手势识别的医学模型交互可视化方法及系统
本专利技术涉及计算机视觉
，特别是指一种基于手势识别的医学模型交互可视化方法及系统
技术介绍
人机交互技术作为当今重要的科学技术之一，备受重视。在国家973计划和中长期科技发展纲要中均提出要支持“和谐人机交互理论和智能信息处理基础研究”，重点、优先发展“虚拟现实技术”和“智能感知技术”。键盘、鼠标等机械式的输入设备，很难进行3D和高度自由的表示，这种交互方式其实在某些程度上并不方便。随着研究工作的深入进行，越来越多的人开始致力于研究人脸识别、人体跟踪与识别及手势跟踪等符合人类习惯的人机交互技术。手势识别技术是人机交互技术中的一种，是一种直观、简单、方便的人机交互手段。人机交互技术已从以计算机为中心逐步转移到以人为中心。目前人机交互主要包括语音交互、手势交互等类型。手势识别在人机交互系统中主要应用于与虚拟环境的交互、手语识别和多媒体用户界面等方面。医学图像的三维可视化技术是一个热点问题，应用领域非常之广。通过三维模型可视化技术、面绘制渲染技术、结合医学图像以及临床诊断和治疗上的本文档来自技高网...

【技术保护点】
1.一种基于手势识别的医学模型交互可视化方法，其特征在于，包括：/n对操作者进行图像采集，捕捉所述操作者的手部动作视觉图像；/n采用预设手势分割算法，对捕捉到的所述手部动作视觉图像进行手势分割；/n基于所述手部动作视觉图像的手势分割结果，分析操作者手势的变化；/n根据所述操作者手势的变化，对被操作的医学模型进行实时控制。/n

【技术特征摘要】
1.一种基于手势识别的医学模型交互可视化方法，其特征在于，包括：
对操作者进行图像采集，捕捉所述操作者的手部动作视觉图像；
采用预设手势分割算法，对捕捉到的所述手部动作视觉图像进行手势分割；
基于所述手部动作视觉图像的手势分割结果，分析操作者手势的变化；
根据所述操作者手势的变化，对被操作的医学模型进行实时控制。


2.如权利要求1所述的基于手势识别的医学模型交互可视化方法，其特征在于，所述对操作者进行图像采集，捕捉操作者的手部动作视觉图像，包括：
通过双目摄像头对操作者进行图像采集，经立体标定获取校准后的立体图像，从而完成立体匹配，获得视差图像，再结合所述双目摄像头的内参数和外参数，利用三角计算获取深度图像，以捕捉到操作者的手部动作视觉图像；其中，捕捉到的手部动作视觉图像包括左视觉图像和右视觉图像。


3.如权利要求2所述的基于手势识别的医学模型交互可视化方法，其特征在于，对捕捉到的所述手部动作视觉图像进行手势分割，包括：
在所述左视觉图像和所述右视觉图像中分别运用所述预设手势分割算法，进行手势分割处理操作，获取分割后的操作者手部的初始位置信息。


4.如权利要求3所述的基于手势识别的医学模型交互可视化方法，其特征在于，所述分析操作者手势的变化；包括：
建立笛卡尔右手坐标系；
选择预设的跟踪算法，将所述初始位置信息设为跟踪算法的起始位置，基于建立的笛卡尔右手坐标系，进行操作者手部的总体运动的分析；
基于总体运动的分析结果，判断标准帧数据发生的位移、旋转和尺度变化，监测所述双目摄像头视野范围内的物体，基于操作者手部运动给出帧运动因素，通过比较当前帧与之前帧，描述合成运动的属性；其中，所述合成运动的属性包括旋转坐标、旋转角度、旋转矩阵、缩放因子以及位移。


5.如权利要求1所述的基于手势识别的医学模型交互可视化方法，其特征在于，所述对被操作的医学模型进行实时控制，包括：
通过操作者的手势变化，控制相机的变焦，实现被操作的医学模型的缩放；通过操作者的手势变化，控制相机的旋转角度，实现被操作的医学模型的旋转。


6.如权利要求1-5任一项...

【专利技术属性】
技术研发人员：鲁媛媛，赵静，何昆仑，李俊来，肖若秀，汪洋，常秀娟，周超，张伟，肖伟厚，
申请(专利权)人：中国人民解放军总医院，
类型：发明
国别省市：北京;11