一种基于VR眼镜的肿瘤穿刺实时模拟系统技术方案

本发明专利技术公开了一种基于VR眼镜的肿瘤穿刺实时模拟系统，包括：用于获取被检测对象的三维信息的装置；用于获取被检测对象肿瘤位置和穿刺路径信息的装置；用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置；用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备；用于实现与虚拟现实设备进行信息交互的装置。本发明专利技术使用支持交互的VR眼镜，完成对于肿瘤穿刺过程层中的模拟，以此完成对于肿瘤穿刺医生的引导，提高肿瘤穿刺的效率，实现患者接受一次CT扫描就能完成穿刺过程，减少了患者接受的辐射剂量。

A real-time simulation system of tumor puncture based on VR glasses

【技术实现步骤摘要】
一种基于VR眼镜的肿瘤穿刺实时模拟系统
本专利技术属于三维图像重建与虚拟现实
，尤其涉及一种基于VR眼镜的肿瘤穿刺实时模拟系统。
技术介绍
本部分的陈述仅仅是提供了与本专利技术相关的
技术介绍
信息，不必然构成在先技术。在现代医学中，肿瘤的穿刺手段在现代诊疗体系中的作用越来越大，目前医院中穿刺过程主要还是由医生依据CT图像或者超声图像，凭借经验进行完成，这种方法穿刺结果的优劣主要取决于医生的经验，经验不足的医生或者精神状态不好的医生穿刺结果可能就会有偏差，影响穿刺的准确度，并且由于穿刺结果的偏差，在穿刺过程中需要病人多次进行CT扫描，增加了病人接受辐射的剂量，并且会使得穿刺治疗的时间变长，穿刺效率变得低下，无法确定穿刺路径，使得患者的就医体验变差。
技术实现思路
为了解决上述问题，本专利技术提出了一种基于VR眼镜的肿瘤穿刺实时模拟系统，利用VR眼镜、三维相机和病人数据可以使得整个穿刺过程变得可视化，并且通过在医生手指上放置的传感器，实现医生在操作过程中对于可视化部分进行虚拟现实控制，使整个穿刺过程更加高效准确。在一些实施方式中，采用如下技术方案：一种基于VR眼镜的肿瘤穿刺实时模拟系统，包括：用于获取被检测对象的三维信息的装置；用于获取被检测对象肿瘤位置和穿刺路径信息的装置；用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置；用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备；<br>用于实现与虚拟现实设备进行信息交互的装置。与现有技术相比，本专利技术的有益效果是：1.使用支持交互的VR眼镜，完成对于肿瘤穿刺过程层中的模拟，以此完成对于肿瘤穿刺医生的引导，提高肿瘤穿刺的效率，实现患者接受一次CT扫描就能完成穿刺过程，减少了患者接受的辐射剂量。2.使用的VR眼镜支持和穿刺医生进行交互，可以对模拟进行旋转和放缩，使得医生的穿刺有更高的精度，减少了患者在穿刺过程中的痛苦，并且提高了穿刺成功率。3.在利用VR眼镜对穿刺点进行标定的时候，完全自动进行，在自动穿刺针引导上减少了医生的工作量，并且提高了自动穿刺引导的效率，减少了患者的等待时间，从而减轻了患者的心理负担。附图说明图1为本专利技术实施例一中五个三维相机摆放位置的示意图；图2为本专利技术实施例一中五个三维相机摆放位置侧面示意图；图3为本专利技术实施例一中使用VR眼镜对穿刺过程进行模拟的流程图。具体实施方式应该指出，以下详细说明都是例示性的，旨在对本申请提供进一步的说明。除非另有指明，本专利技术使用的所有技术和科学术语具有与本申请所属
的普通技术人员通常理解的相同含义。需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本申请的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。实施例一在一个或多个实施例中，公开了一种基于VR眼镜的肿瘤穿刺实时模拟系统，包括：用于获取被检测对象的三维信息的装置；用于获取被检测对象肿瘤位置和穿刺路径信息的装置；用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置；用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备；用于实现与虚拟现实设备进行信息交互的装置。其中，用于获取被检测对象的三维信息的装置具体包括：获取被检测对象的三维信息以及被检测对象肿瘤位置信息，通过五个Kinect相机，完成对于被检测对象三维信息的采集以及重建，并且根据五个三维相机的位置，对各自三维相机完成标定。参照图1和图2，五个三维相机都在被检测对象上方，分别在右侧采集被检测对象上半身三维图像信息、左侧采集被检测对象上半身三维图像信息、右侧采集被检测对象下半身三维图像信息和左侧采集被检测对象下半身三维图像信息和被检测对象头部的上方采集被检测对象头部三维图像信息。用于获取被检测对象肿瘤位置和穿刺路径信息的装置具体包括：在被检测对象身上放置四个定位标识点，之后进行CT三维扫描的方法，生成CT三维坐标系，完成对于肿瘤位置信息的定位。在肿瘤的CT图像下，通过医生对于肿瘤位置和穿刺进针点的标识，完成穿刺路线的设计。通过在被检测对象身上放置四个定位金属点，之后进行CT三维扫描的方法，生成CT三维坐标系，完成对于肿瘤位置信息的定位。在肿瘤的CT图像下，通过医生对于肿瘤位置和穿刺进针点的标识，完成穿刺路线的设计。上述的四个金属点在放置时不能共面，并且其中的任意三个坐标点不能共线，以此产生唯一的三维坐标系。用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置，具体包括：在穿刺病床上设置一个固定位置的金属点，完成对于CT图像坐标系、五个三维相机和VR眼镜的坐标系统一，使所有的坐标系统一到CT三维坐标系中。用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备，即VR眼镜；VR眼镜包括数据接收单元、图像显示单元和眼球聚焦点检测单元。接收单元用来接收CT图像信息、穿刺路径信息、被检测对象三维信息和穿刺针位置信息等，数据接收单元包含数据融合子单元，可以将得到的所有信息根据其坐标位置进行融合。图像显示单元安装在VR眼镜的镜片处，用来显示数据融合处理后的数据信息。眼球聚焦点检测单元放置在镜架上，来实时的检测眼球位置以及聚焦点位置。用于实现与虚拟现实设备进行信息交互的装置，具体包括：在穿刺医生的手上放置若干传感器，可以是加速度传感器位移传感器等；用来检测医生手指的运动反馈，捕获手的顺时针和逆时针旋转、手指五指向外和五指向内、食指和无名指的上下运动信息。通过手的顺时针和逆时针旋转，完成视野中三维图像的顺时针旋转和逆时针旋转。通过手指五指向外和五指向内的信息配合眼球聚焦点检测的检测结果，以聚焦点为中心，完成图像的放大和图像的缩小。通过食指的上下运动信息和眼球聚焦点检测的检测结果完成对于目标点的标记。通过无名指的上下运动信息完成对于上一步指令的撤销。本实施例通过VR镜片的显示完成对于穿刺过程的模拟，其中穿刺进针点选择之后，通过在镜片中人体三维坐标相应点图像的标记，就可以完成对于穿刺过程的引导，并且通过对于穿刺针的位置检测可以在VR眼睛上实时更新穿刺针的位置，从而完成对于穿刺过程的模拟，并且在穿刺过程中，穿刺医生可以根据上述的方法完成对穿刺模拟图像进行控制，在穿刺过程中，为了便于穿刺医生观察病人的状态，VR眼镜可以检测医生的抬头和低头信息，当医生低头时，VR镜片上不显示相关信息，此时VR眼镜相当于透镜，便于医生观察被检测对象的实际情况，当医生抬头时，VR眼镜依旧显示肿瘤穿刺的模拟过程。本文档来自技高网...

【技术保护点】
1.一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，包括：/n用于获取被检测对象的三维信息的装置；/n用于获取被检测对象肿瘤位置和穿刺路径信息的装置；/n用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置；/n用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备；/n用于实现与虚拟现实设备进行信息交互的装置。/n

【技术特征摘要】
1.一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，包括：
用于获取被检测对象的三维信息的装置；
用于获取被检测对象肿瘤位置和穿刺路径信息的装置；
用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置；
用于将被检测对象的三维信息、被检测对象的肿瘤位置以及穿刺路径信息进行融合显示的虚拟现实设备；
用于实现与虚拟现实设备进行信息交互的装置。


2.如权利要求1所述的一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，所述用于获取被检测对象的三维信息的装置包括：分别设置在被检测对象不同位置的三维相机；所述三维相机分别获取被检测对象不同位置的三维信息，实现被检测对象三维信息的重建。


3.如权利要求1所述的一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，所述用于获取被检测对象肿瘤位置和穿刺路径信息的装置，包括：
在被检测对象身上放置四个定位标识点，通过CT三维扫描的方式，生成CT三维坐标系，完成对于肿瘤位置信息的定位；
在CT图像下，通过对于肿瘤位置和穿刺进针点位置的标识，完成穿刺路线的设计。


4.如权利要求3所述的一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，所述的四个定位标识点在放置时不能共面，并且任意三个定位标识点不能共线，以此产生唯一的三维坐标系。


5.如权利要求1所述的一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，所述用于将被检测对象的三维信息与被检测对象的肿瘤位置统一到同一个坐标系下的装置，包括：设定一个固定位置的标识点，基于该标识点，将被检测对象的三维信息与被检测对象的肿瘤位置统一到CT图像的三维坐标系下。


6.如权利要求1所述的一种基于VR眼镜的肿瘤穿刺实时模拟系统，其特征在于，用于将被检测对象的三维信息、被...

【专利技术属性】
技术研发人员：袁双虎，李玮，孟祥伟，李莉，刘宁，王素贞，于清溪，赵芬，
申请(专利权)人：山东省肿瘤防治研究院山东省肿瘤医院，山东大学，
类型：发明
国别省市：山东;37