用于输出增强现实信息的方法和系统技术方案

本发明专利技术涉及用于输出增强的现实信息的方法和系统。描述了一种向第一用户(U1)输出增强现实信息(AR)的方法，该增强现实信息(AR)与医疗装置(2、IT、MD)和/或患者(13)的医学检查有关，其中所述方法包括以下步骤：‑获取(R1)第一信息，所述第一信息选自由图像信息、深度信息、坐标信息及其组合构成的组，其中第一信息与医疗装置和/或患者(13)的医学检查有关；‑基于所述第一信息，创建(GA)与所述医疗装置(2、IT、MD)和/或所述患者(13)的医学检查有关的增强现实信息(AR)；‑输出(D1)所述增强现实信息(AR)，使得能够在第一用户(U1)的视野中感知所述增强现实信息(AR)。

Method and system for outputting augmented reality information

The present invention relates to methods and systems for outputting augmented reality information. A description to the first user (U1) augmented reality information output (AR) method, the augmented reality information (AR) and medical devices (2, IT, MD) and / or patients (13) of the medical examination, wherein the method comprises the following steps: acquiring (R1) first letter information, the first selected information and image information and depth information, coordinate information and combination group, wherein the first information and the medical device and / or patients (13) of the medical examination; the first based on information creation (GA) and the medical device (2, IT, and MD) or the patient (13) augmented reality information related to the medical examination (AR); output (D1) information of the augmented reality (AR), enabling the first user (U1) real information perception the enhanced vision (AR).

【技术实现步骤摘要】
用于输出增强现实信息的方法和系统
本专利技术涉及一种用于向第一用户输出涉及医疗装置和/或患者的医学检查的增强的现实信息的方法。本专利技术还涉及一种用于输出增强的现实信息的系统、一种计算机程序产品以及一种计算机可读介质。
技术介绍
具有不同专业知识和观点的许多用户通常涉及使用医疗装置(例如医学成像装置)以及还涉及患者的医学检查。这些用户特别包括患者、医疗技术人员、具有不同经验程度的医师、技术人员以及医疗装置制造商。这些用户之间的通信对于医疗装置的高效使用或医学检查的成功是重要的。在这些情况下，以前在很大程度上诉诸于口头交流，而没有任何技术支持。此外，使用诸如小册子、信息页、信息胶片、操作说明书等已知的沟通辅助。患者的医学检查可以例如包括介入、治疗(特别是放射治疗)、医学成像，临床工作流程、对患者的指令，等等。在介入中，重要的是精确地击中目标区域并保护周围的健康组织。因此，在许多情况下，将通过医学成像来支持介入。以前，通过对介入的医学成像所提供的成像信息的传输在很大程度上取决于执行介入的医师的能力、经验和空间感觉。通常，通过医学成像提供的成像信息显示在一个或多个监视器上。监视器或多个监视器各自布置在进行介入的检查室中的柔性支撑结构上。这种监视器和介入区域之间的相对较大的距离可能意味着医师的巨大的额外负荷，特别是当他们观察监视器的能力受到限制时。此外，医师必须经常在介入过程期间在介入区域与一个或多个监视器之间来回移动他们的视线，特别是他们的焦点。在许多情况下，这也与医师的人体工程学负荷相关。在临床工作流程中，例如在放射学中，重要的是患者在正确的时间接收到清楚的指令，以便高效地通过各种测点(station)和步骤。临床工作流程的另外重要方面是患者的健康，特别是关于焦虑、不确定性和私人领域的限制以及个人数据的保护方面。利用医学成像，过于及时和清楚的指令、例如影响呼吸以及患者的健康的指令是重要的。
技术实现思路
本专利技术的目的是使医疗装置的改进的使用和/或患者的医学检查的改进的执行成为可能。该目的通过如权利要求1所述的方法、如权利要求19所述的系统、如权利要求31所述的计算机程序产品以及如权利要求32所述的计算机可读介质来实现。在用于向第一用户输出涉及医疗装置和/或患者的医学检查的增强的现实信息的本专利技术方法中，获取第一信息，该第一信息选自由图像信息、深度信息、坐标信息及其组合构成的组，其中第一信息涉及医疗装置和/或医学检查。基于第一信息，创建与医疗装置和/或患者的医学检查有关的增强的现实信息。输出增强现实信息，使得能够在第一用户的视野中感知到增强现实信息。增强现实信息特别地被理解为这样的信息：利用该信息可以增强现实，特别是第一用户的视野和/或第二用户的视野。具体地，可以利用增强现实信息基于第一用户的视野和/或基于第二用户的视野来创建增强的现实。当增强现实信息在第一用户的视野中对第一用户可见时，增强现实信息特别地能够在第一用户的视野中被感知。特别地，可以输出增强现实信息，使得通过增强的现实信息来增强第一用户的视野。增强的现实信息可以例如通过增强现实装置来创建和/或输出。术语“用于创建增强现实的装置”和术语“增强现实装置”被同义地使用。现实的强化特别地对于本领域技术人员而言被称为“增强”。强化的现实特别地对于本领域技术人员而言被称为“增强的现实”。强化现实装置特别地对于本领域技术人员而言被称为“增强现实装置”。用于创建增强现实的已知装置例如是由美国的微软公司制造的Microsoft用于创建增强现实的装置的结构和功能对于本领域技术人员而言是已知的，特别是从US2014098226A1、US2015248793A、US2015294507A1、US2015234455A1、WO2015134958A1、WO2015161307A1和[CR06]可知。本专利技术的一种实施例形式提供了所描述的方法和/或自动或全自动地执行所描述方法的一个或多个步骤中的每个步骤。具体地，可以自动地和/或全自动地创建增强现实信息，特别是通过增强现实装置来创建。在本申请的上下文中，“自动地”意味着相应的步骤通过软件和/或通过硬件自动地执行和/或基本上不需要用户对相应步骤的交互。特别地，在仅仅需要确认一个或多个结果和/或仅由用户执行一个或多个中间步骤时，基本上不需要用户的交互。在本申请的上下文中，“全自动地”意味着对于相应步骤的执行，完全不需要用户的交互。不管是“自动地”还是“全自动地”执行一个或多个步骤，本专利技术的方法都可以是另外需要用户的交互的工作流程的要素。例如，用户的交互可以包括用户从例如通过屏幕呈现的菜单手动地创建或选择检查方案和/或检查计划和/或临床问题。作为替代或补充，增强现实信息可以基于第一用户的输入和/或基于第二用户的输入来创建。例如，基于第一用户的输入和/或基于第二用户的输入，可以关于类型、位置、大小和/或形状创建和/或适配标记，其中增强现实信息具有标记。图像信息例如可以是照相机图像和/或2D图像(二维图像)。本专利技术的一种实施例形式提供第一信息是3D图像(三维图像)。3D图像尤其可以是2D图像和深度信息的组合。在这种情况下，可以向3D图像的每个像素分配2D图像的图像值和深度信息的深度值。图像信息可以例如通过第一照相机单元获取。第一照相机单元例如可以是3D照相机。3D图像和/或深度信息可以例如通过3D照相机获取。第一增强现实装置例如可以具有第一照相机单元。3D照相机可以特别地被设计用于电磁辐射的检测，特别是用于检测与x射线辐射相比在光谱的较低频率范围内、例如在光谱的可见光或红外范围内的电磁辐射。3D照相机可以例如被实施为立体照相机或者作为飞行时间测量系统。飞行时间测量系统特别地对于本领域技术人员而言称为“飞行时间照相机”。3D照相机可以例如被实施为用于通过结构化照明来获取3D图像和/或用于获取深度信息。坐标信息可以例如涉及图数据集。图数据集例如可以具有第一用户的视野中的空间区域的图。特别地，医疗装置的至少一个部分可以位于该空间区域中和/或医学检查的至少一个分步骤可以在该空间区域中进行。坐标信息例如可以指定特别是与图数据集和/或空间区域的图有关的位置和/或方位。根据本专利技术的一个方面，坐标信息包括涉及患者的至少一个部分的至少一个患者坐标和/或涉及医疗装置的至少一个部分的至少一个装置坐标。例如，所述至少一个患者坐标可以例如指定患者的至少一个部分的位置和/或方位，特别是与图数据集和/或空间区域的图有关的位置和/或方位。所述至少一个装置坐标可以例如指定医疗装置的至少一个部分的位置和/或方位，特别是与图数据集和/或空间区域的图有关的位置和/或方位。医疗装置的至少一个部分可以例如是医疗装置的可移动部件。本专利技术的一种实施例形式提供可以确定第一用户的位置和/或视线方向，特别是与图数据集和/或空间区域的图有关的位置和/或视线方向，和/或可以确定第一增强现实装置的位置和/或对准，特别是与图数据集和/或空间区域的图有关的位置和/或对准。可以例如基于第一用户的位置和/或视线方向和/或基于第一增强现实装置的位置和/或对准来创建增强现实信息。这可以例如借助于图像信息、深度信息和/或运动信息来完成。可以例如通过一个或多个加速度传感器获取运动信息。特别地，第一增强现实装置本文档来自技高网...

【技术保护点】
一种向第一用户(U1)输出增强现实信息(AR)的方法，所述增强现实信息(AR)与医疗装置(2、IT、MD)和/或患者(13)的医学检查有关，其中所述方法包括以下步骤：‑获取(R1)第一信息，所述第一信息选自由图像信息、深度信息、坐标信息及其组合构成的组，其中所述第一信息涉及所述医疗装置和/或所述患者(13)的所述医学检查；‑基于所述第一信息，创建(GA)与所述医疗装置(2、IT、MD)和/或所述患者(13)的医学检查有关的增强现实信息(AR)；‑输出(D1)所述增强现实信息(AR)，使得所述增强现实信息(AR)能够在所述第一用户(U1)的视野中被感知。

【技术特征摘要】
2015.12.23 DE 102015226669.91.一种向第一用户(U1)输出增强现实信息(AR)的方法，所述增强现实信息(AR)与医疗装置(2、IT、MD)和/或患者(13)的医学检查有关，其中所述方法包括以下步骤：-获取(R1)第一信息，所述第一信息选自由图像信息、深度信息、坐标信息及其组合构成的组，其中所述第一信息涉及所述医疗装置和/或所述患者(13)的所述医学检查；-基于所述第一信息，创建(GA)与所述医疗装置(2、IT、MD)和/或所述患者(13)的医学检查有关的增强现实信息(AR)；-输出(D1)所述增强现实信息(AR)，使得所述增强现实信息(AR)能够在所述第一用户(U1)的视野中被感知。2.根据权利要求1所述的方法，-其中所述坐标信息通过所述医疗装置(2、IT、MD)提供。3.根据权利要求1或2所述的方法，-其中与所述医疗装置(2、IT、MD)的可移动部件的运动有关的控制命令被输出；-其中所述坐标信息基于所述控制命令而建立。4.根据权利要求1至3之一所述的方法，-其中与所述医疗装置(2、IT、MD)的可移动部件的运动有关的运动参数被获取；-其中所述坐标信息基于所述运动参数而建立。5.根据权利要求1至4之一所述的方法，-其中通过所述医疗装置(2、IT、MD)提供医疗数据集；-其中所述增强现实信息(AR)基于所述医疗数据集而创建。6.根据权利要求1至5之一所述的方法，-其中基于所述第一信息建立与所述患者(13)的医学检查有关的检查信息(EI)；-其中所述增强现实信息(AR)基于所述检查信息而创建。7.根据权利要求1至6中之一所述的方法，-其中基于所述第一信息建立与所述患者(13)有关的患者信息；-其中所述增强现实信息(AR)基于所述患者信息而创建。8.根据权利要求7所述的方法，-其中所述患者信息选自由以下信息及其组合构成的患者信息组：-与所述患者(13)的识别有关的患者识别信息，-与所述患者(13)的生理状态和/或情绪状态有关的患者状态信息，-与所述患者(13)的位置有关的患者位置信息。9.根据权利要求1至8之一所述的方法，-其中提供与所述患者(13)的结构(SP)有关的医疗成像数据集；-其中所述增强现实信息(AR)基于所述医疗成像数据集而创建。10.根据权利要求9所述的方法，-其中所述增强现实信息(AR)具有标记所述患者(13)的结构(SP)的结构标记(SP)。11.根据权利要求1至10之一所述的方法，-其中提供与所述患者(13)的标定位置和/或所述医疗装置(2、IT、MD)的标定位置有关的标定位置信息；-其中所述增强现实信息(AR)基于所述标定位置信息而创建；-其中所述增强现实信息(AR)具有标记所述患者(13)的标定位置和/或所述医疗装置(2、IT、MD)的标定位置的标定位置标记。12.根据权利要求1至11之一所述的方法，-其中提供与所述患者(13)的区域和/或所述医疗装置(2、IT、MD)的区域有关的区域信息，-其中所述增强现实信息(AR)基于所述区域信息而创建；-其中所述增强现实信息(AR)具有标记所述患者(13)的区域和/或所述医疗装置(2、IT、MD)的区域的区域标记(SR)。13.根据权利要求10至12之一所述的方法，-其中从由所述结构标记(SP)、所述标定位置标记、所述区域标记(SR)及其组合构成的标记组中选择的标记具有立体表示和/或全息类型表示。14.根据权利要求1至13之一所述的方法，-其中获取所述第一用户(U1)的输入；-其中所述增强现实信息(AR)基于所述第一用户(U1)的输入而创建。15.根据权利要求1至14之一所述的方法，其中，所述方法包括以下步骤：-输出所述增强现实信息(AR)，使得所述增强现实信息(AR)能够在第二用户(U2)的视野中被感知；-获取所述第二用户(U2)的输入；-其中所述增强现实信息(AR)基于所述第二用户(U2)的输入而创建。16.根据权利要求14或15所述的方法，-其中所述第一用户(U1)的输入是所述第一用户(U1)的手势，和/或其中所述第二用户(U2)的输入是所述第二用户(U2)的手势。17.根据权利要求11至16之一所述的方法，-其中所述标定位置信息和/或所述区域信息基于所述第一用户(U1)的输入和/或基于所述第二用户(U2)的输入而建立。18.根据权利要求1至17之一所述的方法，-其中选择与所述第一用户(U1)有关的第一用户简档和/或与所述第二用户...

【专利技术属性】
技术研发人员：T·伯特格，C·德拉蒙塔，T·汉内曼，P·赫尔策，G·克雷默，S·勒彻特，G·索泽，
申请(专利权)人：西门子医疗有限公司，
类型：发明
国别省市：德国,DE