一种手术机器人系统及手术导航方法技术方案

本发明专利技术提供一种手术机器人系统及手术导航方法，该系统包括：工作站、机械臂、结构光模块；工作站包括计算控制中心、显示装置和输入设备；结构光模块包括投影组件和摄像组件，结构光模块连接机械臂；机械臂根据工作站的控制指令调整姿态；计算控制中心被配置执行如下内容：通过结构光模块获取目标对象的三维点云；根据三维点云以及医学模型进行注册，并生成对应于所述投影组件当前位姿的投影图像；将投影图像发送给结构光模块，以使得结构光模块通过投影组件向目标对象投影。本发明专利技术能够将需要观察的信息投影到目标对象表面，提升了信息密度，用户无需在关注部位和屏幕之间切换视线，便于直观地进行手术规划、手术导航等。手术导航等。手术导航等。

【技术实现步骤摘要】
一种手术机器人系统及手术导航方法


[0001]本专利技术涉及医疗器械
，尤其涉及一种手术机器人系统及手术导航方法。

技术介绍

[0002]医生在对患者制定合适的治疗方案时或者对患者执行手术操作时，需要确定一些组织结构的位置，或者确定一些手术规划内容的位置。
[0003]现有技术中一种普遍做法是直接在屏幕中观察医学影像模型通过比对真实患者确定相关内容的位置。这种方式的缺陷在于：1、医生只能在屏幕中调整医学影像模型进行观察，视野受限，不便于多人讨论；2、屏幕中观察到的医学影像模型与实际空间中的真实患者在视觉效果上存在差异，不够直观；3、医学影像模型并不与真实患者直接对应，医生难以在真实患者身上精确地定位手术相关内容。
[0004]现有技术也有“计算机+投影仪”的投影系统，医生通过投影仪将医学影像模型中的信息投影到真实空间，但是投影信息与真实空间的匹配精度很差，医生需要反复调试投影仪来优化投影效果。这种方式的缺陷在于：1、投影过程复杂，需要人工反复调试；2、投影精度较低。3、投影仪影响手术空间。
[0005]对于现有技术的上述缺陷，本专利技术提出一种手术机器人系统及手术导航方法以解决或至少部分解决现有技术的上述缺陷。

技术实现思路

[0006]本专利技术提供一种手术机器人系统及手术导航方法，用以解决现有技术中医生观察三维模型不够直观，需要反复在手术部位和屏幕之间切换视线，容易导致手术操作不连贯缺陷。
[0007]本专利技术提供一种手术机器人系统，包括：工作站、机械臂、结构光模块；
[0008]所述工作站包括计算控制中心、显示装置和输入设备；
[0009]所述结构光模块包括投影组件和摄像组件，所述结构光模块连接所述机械臂；
[0010]所述机械臂根据所述工作站的控制指令调整姿态；
[0011]所述计算控制中心被配置执行如下内容：
[0012]S11、通过所述结构光模块获取目标对象的三维点云；
[0013]S12、根据所述三维点云以及医学模型进行注册，并生成对应于所述投影组件当前位姿的投影图像；
[0014]S13、将所述投影图像发送给所述结构光模块，以使得所述结构光模块通过所述投影组件向目标对象投影。
[0015]根据本专利技术提供的一种手术机器人系统，所述结构光模块通过法兰可拆卸地安装到所述机械臂；
[0016]系统还包括引导模块，在所述结构光模块从所述法兰上卸下后，所述引导模块安装到所述法兰，用于引导手术器械的运动轨迹。
[0017]根据本专利技术提供的一种手术机器人系统，系统还包括引导模块，所述引导模块集成或可拆卸地安装到所述机械臂，用于引导手术器械的运动轨迹。
[0018]根据本专利技术提供的一种手术机器人系统，所述S11包括：
[0019]控制所述机械臂运动到第一位姿；
[0020]控制所述结构光模块在所述第一位姿采集得到所述三维点云。
[0021]根据本专利技术提供的一种手术机器人系统，所述S11包括：
[0022]控制所述机械臂在运动到至少两个位姿；
[0023]控制所述结构光模块在所述至少两个位姿分别采集点云；
[0024]根据各位姿对应的机械臂姿态矩阵，将各位姿采集的点云进行融合，得到所述三维点云。
[0025]根据本专利技术提供的一种手术机器人系统，所述S12包括：
[0026]将所述三维点云与所述医学模型配准，得到点云坐标系与模型坐标系的转换关系；
[0027]根据所述点云坐标系与所述模型坐标系的转换关系，将所述投影组件与所述医学模型统一到同一坐标系；
[0028]在所述同一坐标系中，生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像；其中，所述医学模型包含所述待投影模型。
[0029]根据本专利技术提供的一种手术机器人系统，所述S12包括：
[0030]将机械臂坐标系下的所述三维点云与所述医学模型配准，得到机械臂坐标系与模型坐标系的转换关系；
[0031]根据所述机械臂坐标系与所述模型坐标系的转换关系，将所述医学模型转换至同一坐标系；
[0032]在每次调整所述结构光模块位姿后，根据所述投影组件在所述机械臂坐标系的当前位姿以及所述同一坐标系下的所述医学模型，生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像；其中，所述医学模型包含所述待投影模型。
[0033]根据本专利技术提供的一种手术机器人系统，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：
[0034]将所述投影组件的当前位姿以及所述待投影模型输入图像拍摄模型，得到所述投影图像；其中，所述待投影模型为面片模型。
[0035]根据本专利技术提供的一种手术机器人系统，所述图像拍摄模型是基于三维模型处理框架生成的可调用接口。
[0036]根据本专利技术提供的一种手术机器人系统，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：
[0037]根据所述投影组件的当前位姿，将所述待投影模型转换至投影组件坐标系；其中，所述待投影模型为点云模型；
[0038]根据所述投影组件的内参以及所述投影组件坐标系下的待投影模型，生成所述投影图像。
[0039]根据本专利技术提供的一种手术机器人系统，所述根据所述投影组件的内参以及所述投影组件坐标系下的待投影模型，生成所述投影图像，包括：
[0040]对所述投影组件坐标系下的所述待投影模型进行归一化操作，得到第一图像；
[0041]根据所述投影组件的畸变系数对所述第一图像进行畸变变换，得到第二图像；
[0042]根据所述投影组件的内参将所述第二图像对应到投影像平面，并处理得到所述投影图像。
[0043]根据本专利技术提供的一种手术机器人系统，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：
[0044]在所述投影组件当前位姿下获取所述目标对象的结构光点云；其中，所述目标对象的结构光点云是所述结构光模块采集得到的；
[0045]根据所述医学模型和所述投影组件的位置，生成所述待投影模型在目标对象表面对应的第一落点点云；其中，所述待投影模型为点云模型；
[0046]根据所述第一落点点云，从所述目标对象的结构光点云中确定出与所述第一落点点云所在区域对应的第二落点点云；
[0047]根据所述第二落点点云，结合所述目标对象的结构光点云的采集过程，生成所述投影图像。
[0048]根据本专利技术提供的一种手术机器人系统，所述根据所述医学模型和所述投影组件的位置，生成所述待投影模型在目标对象表面对应的第一落点点云，包括：
[0049]在所述待投影模型属于所述目标对象的表面点云的情况下，将所述待投影模型作为所述第一落点点云；
[0050]在所述待投影模型包含所述目标对象的非表面点的情况下，将所述投影组件抽象为一个点，并与所述待投影模型中的每一点连线，各连线与所述目标对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种手术机器人系统，其特征在于，包括：工作站、机械臂、结构光模块；所述工作站包括计算控制中心、显示装置和输入设备；所述结构光模块包括投影组件和摄像组件，所述结构光模块连接所述机械臂；所述机械臂根据所述工作站的控制指令调整姿态；所述计算控制中心被配置执行如下内容：S11、通过所述结构光模块获取目标对象的三维点云；S12、根据所述三维点云以及医学模型进行注册，并生成对应于所述投影组件当前位姿的投影图像；S13、将所述投影图像发送给所述结构光模块，以使得所述结构光模块通过所述投影组件向目标对象投影。2.根据权利要求1所述的手术机器人系统，其特征在于，所述结构光模块通过法兰可拆卸地安装到所述机械臂；系统还包括引导模块，将所述结构光模块从所述法兰上拆卸后，所述引导模块安装到所述法兰，用于引导手术器械的运动轨迹。3.根据权利要求1所述的手术机器人系统，其特征在于，所述S12包括：将所述三维点云与所述医学模型配准，得到点云坐标系与模型坐标系的转换关系；根据所述点云坐标系与所述模型坐标系的转换关系，将所述投影组件与所述医学模型统一到同一坐标系；在所述同一坐标系中，生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像；其中，所述医学模型包含所述待投影模型。4.根据权利要求1所述的手术机器人系统，其特征在于，所述S12包括：将机械臂坐标系下的所述三维点云与所述医学模型配准，得到机械臂坐标系与模型坐标系的转换关系；根据所述机械臂坐标系与所述模型坐标系的转换关系，将所述医学模型转换至同一坐标系；在每次调整所述结构光模块到投影位姿后，根据所述投影组件的当前位姿以及所述同一坐标系下的所述医学模型，生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像；其中，所述医学模型包含所述待投影模型。5.根据权利要求3或4所述的手术机器人系统，其特征在于，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：将所述投影组件的当前位姿以及所述待投影模型输入图像拍摄模型，得到所述投影图像；其中，所述待投影模型为面片模型。6.根据权利要求5所述的手术机器人系统，其特征在于，所述图像拍摄模型是基于三维模型处理框架生成的可调用接口。7.根据权利要求3或4所述的手术机器人系统，其特征在于，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：根据所述投影组件的当前位姿，将所述待投影模型转换至投影组件坐标系；其中，所述待投影模型为点云模型；根据所述投影组件的内参以及所述投影组件坐标系下的待投影模型，生成所述投影图
像。8.根据权利要求7所述的手术机器人系统，其特征在于，所述根据所述投影组件的内参以及所述投影组件坐标系下的待投影模型，生成所述投影图像，包括：对所述投影组件坐标系下的所述待投影模型进行归一化操作，得到第一图像；根据所述投影组件的畸变系数对所述第一图像进行畸变变换，得到第二图像；根据所述投影组件的内参将所述第二图像对应到投影像平面，并处理得到所述投影图像。9.根据权利要求3或4所述的手术机器人系统，其特征在于，所述生成所述投影组件当前位姿下的对应于待投影模型的所述投影图像，包括：在所述投影组件当前位姿下获取所述目标对象的结构光点云；其中，所述目标对象的结构光点云是所述结构光模块采集得到的；根据所述医学模型和所述投影组件的位置，生成所述待投影模型在目标对象表面对应的第一落点点云；其中，所述待投影模型为点云模型；根据所述第一落点点云，从...

【专利技术属性】
技术研发人员：刘文博，旷雅唯，张文露，
申请(专利权)人：华科精准北京医疗科技有限公司，
类型：发明
国别省市：