至少一种示例性实施方式涉及一种设备，所述设备包括存储器和处理器，所述存储器包括指令，所述处理器执行指令以在临床医生对患者的内部区域施行医疗程序期间生成内部区域的图像数据和深度数据。指令引起处理器在医疗程序期间基于深度数据生成患者的内部区域的深度模型，基于深度模型确定医疗程序的图像数据不包括内部区域的部分的图像数据，并且引起一个或多个警报以警告临床医生内部区域的部分未检查。检查。检查。
【技术实现步骤摘要】
【国外来华专利技术】用于识别医疗程序期间未检查区域的设备、系统和方法
[0001]相关申请数据
[0002]本申请要求于2020年9月4日提交的美国专利申请第17/012,974号、题为“用于识别医疗程序期间未检查区域的设备、系统和方法”的权益，并且根据35U.S.C.
§
119(e)要求其优先权，其全部内容通过援引并入本文。
[0003]本公开总体涉及用于识别医疗程序期间未检查区域的设备、系统和方法。
技术介绍
[0004]现代医疗程序(medical procedure)可能是相机协助的，具有实时显示的程序的视频和/或静止图像，以协助临床医生在导航解剖结构的情况下施行程序。在某些情况下，解剖结构的区域没有被检查出来，例如，因为解剖结构的大区域可能看起来非常相似。在其他情况下，由于解剖结构中缺乏明显的特征而导致的定向障碍可能导致部分解剖结构未检查。
附图说明
[0005]图1例示了根据至少一种示例性实施方式的系统；
[0006]图2例示了根据至少一种示例性实施方式的医疗仪器的示例性结构；
[0007]图3例示了根据至少一种示例性实施方式的方法；
[0008]图4例示了根据至少一种示例性实施方式的方法；
[0009]图5例示了根据至少一种示例性实施方式的医疗程序的工作流；以及
[0010]图6例示了根据至少一种示例性实施方式的示例性输出设备。
技术实现思路
[0011]至少一种示例性实施方式涉及包括存储器和处理器的设备，所述存储器包括指令，所述处理器执行指令以在临床医生对患者的内部区域施行医疗程序期间生成内部区域的图像数据和深度数据，在医疗程序期间基于深度数据生成患者内部区域的深度模型，基于深度模型确定医疗程序的图像数据不包括内部区域的部分的图像数据，并且引起一个或多个警报以警告临床医生内部区域的部分未检查。
[0012]至少一种示例性实施方式涉及包括显示器、医疗仪器和设备的系统。所述设备包括存储器和处理器，所述存储器包括指令，所述处理器执行指令以在临床医生对患者的内部区域施行医疗程序期间生成内部区域的图像数据和深度数据，在医疗程序期间基于深度数据生成患者内部区域的深度模型，基于深度模型确定医疗程序的图像数据不包括内部区域的部分的图像数据，引起一个或多个警报以警告临床医生内部区域的部分未检查。
[0013]至少一种示例性实施方式涉及一种方法，所述方法包括在临床医生对患者的内部区域施行医疗程序期间生成内部区域的图像数据和深度数据，在医疗程序期间基于深度数
据生成患者的内部区域的深度模型，基于深度模型确定图像数据不包括内部区域的部分的图像数据，并且引起一个或多个警报以警告临床医生内部区域的部分未检查。
具体实施方式
[0014]内窥镜和其他用于对解剖结构进行成像的医疗仪器的视场有限，并且需要用户操纵内窥镜对解剖结构内的更大视场区域进行成像。在某些情况下，解剖结构的区域没有被检查到，例如，因为解剖结构的区域看起来彼此相似。由于解剖结构中缺乏明显的特征而导致的定向障碍是可能导致部分解剖结构未检查的另外实例。
[0015]本专利技术的概念涉及解剖成像系统和诊断程序，其中确保解剖结构的目标区域被全面检查是重要的。例如，本专利技术概念涉及通过识别和指示未检查区域来协助内窥镜或其他医疗程序中的解剖结构视觉检查的系统。该系统可以用于生成关于有多少解剖结构被成像传感器检查或成像的信息，以及提供关于未检查的感兴趣区域的信息(例如，位置、形状、大小等)。例如，该系统可以协助外科医生或临床医生确保所有计划被检查异常的解剖结构实际上都得到了检查。该系统对程序诸如结肠镜、支气管镜、喉镜等是有用的。
[0016]一般来说，专利技术概念包括生成深度数据和视觉成像数据，并且将它们结合起来(使用已知的对齐和/或制图(mapping)操作)以创建可视化并触发警报，该警报可以用于指示已经和尚未由成像系统成像的解剖结构部分。可视化和警报为尚未检查或成像的区域提供信息(真实或相对的位置、面积、形状等)，以有助于减轻留下本应检查而未检查的区域的风险。
[0017]通过绘制/建立3D深度模型，可以识别解剖结构内未被成像传感器彩色成像的区域。例如，3D深度模型本身的不连续(例如，缺失数据)可能指示，在不连续周围的区域没有被彩色图像传感器成像。
[0018]在至少一种示例性实施方式中，可以预先生成通用的3D模型(例如，从其他患者获取的深度数据)，并且用于选择应该被检查的解剖结构的一般区域。然后，警报可以指示所选择的区域是否被全面检查，以及提供措施和/或指示整个区域有多少未检查，有多少个区域未检查(盲点)，以及这些缺失区域的位置。
[0019]即使缺少预先生成的通用3D模型，用户或临床医生也可以有能力指出一般感兴趣区域是什么，并且一旦内窥镜到达一般感兴趣区域，就通过专利技术概念的制图和测量系统启动生成所需的信息。用户还可以具有能力指出内窥镜何时到达一般感兴趣区域的端，然后能够生成额外的指标，其用于指示感兴趣区域是否被全面检查，检查了多少，有多少个子区域没有被检查(盲点)，等等。
[0020]专利技术概念的另外特征可以有助于用户导航3D空间，以得到尚未检查，或被遗漏的区域。这可以通过在显示监视器上添加图形(箭头)、音频指令(例如，“继续前进”、“未检查的区域在左边”等)来实现。
[0021]对于医疗内窥镜，仅依靠2D图像数据来确定解剖结构内的区域是否被全面检查，不如同时使用深度数据更可靠。例如，使用2D视觉数据容易受到反射、过度曝光、烟雾等的影响。然而，深度数据对于制图解剖结构非常有用，因为人体解剖结构内很少或没有超过深度相机视野的平坦表面，这减少或消除了深度数据无法可靠地确定区域是否被全面检查的情况。
[0022]因此，专利技术概念涉及系统、方法和/或设备，它们同时或以时间对齐的方式生成视觉成像数据以及深度数据，将视觉成像数据与深度数据对齐和/或将一组数据映射到另一组数据，使用深度数据生成场景的3D模型，将3D模型中的不连续性(缺失数据)识别为模型中不存在的深度数据的部分，并且推断出场景中的这些没有被成像传感器成像的部分(即，识别图像/视觉数据缺失的区域)。专利技术概念可以创建可视化、警报、测量等，以向用户提供关于被成像和未被成像的区域、它们的位置、它们的形状、遗漏区域的数量等信息。
[0023]此外，专利技术概念可以使用深度和图像/视觉数据来创建场景的视觉内容的3D再现或复合3D模型，通过例如使用相应的深度数据信息将2D视觉或图像数据投影或叠加到3D深度模型上。至少一种示例性实施方式为用户提供了交互式旋转3D复合和/或深度模型的选项。深度模型的深度图表征可以使用深度数据和任选地图像/视觉数据来创建。作为实例，可以为特定感兴趣场景生成四个相应的深度图示例，其视图来自北、南、东、西，所有四个视图都源自单个3D深度模型。如上所述，根据示例性实施方式的系统识别3D模型中缺失数据的区域，以识别尚未成像或检查的解剖结构的部分。
[0024]在本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种设备，包括：包括指令的存储器；以及处理器，所述处理器执行所述指令以：在临床医生对患者的内部区域施行医疗程序期间生成所述内部区域的图像数据和深度数据；在所述医疗程序期间基于所述深度数据生成所述患者的内部区域的深度模型；基于所述深度模型确定所述医疗程序的图像数据不包括所述内部区域的部分的图像数据；以及引起一个或多个警报以警告所述临床医生所述内部区域的部分未检查。2.根据权利要求1所述的设备，其中，所述指令包括引起所述处理器进行以下的指令：基于所述医疗程序的图像数据和所述深度模型生成所述内部区域的复合模型；以及引起显示器显示所述复合模型和与所述内部区域的部分有关的信息。3.根据权利要求2所述的设备，其中，所述复合模型包括具有所述医疗程序的图像数据的所述内部区域的三维模型，所述医疗程序的图像数据投影到所述深度模型上。4.根据权利要求2所述的设备，其中，所述一个或多个警报包括显示在所述显示器上的警报。5.根据权利要求2所述的设备，其中，所述信息包括所述复合模型上的所述内部区域的部分的可视化。6.根据权利要求2所述的设备，其中，所述信息包括所述临床医生导航医疗仪器到所述内部区域的部分的视觉和/或音频提示和导向。7.根据权利要求2所述的设备，其中，所述指令包括引起所述处理器进行以下的指令：基于对所述内部区域通用或特定的另一深度模型，确定所述内部区域的部分是感兴趣区域，其中，所述一个或多个警报包括通知所述临床医生应该检查而未检查的所述内部区域的部分的警报。8.根据权利要求2所述的设备，其中，所述指令包括引起所述处理器进行以下的指令：接收来自所述临床医生识别所述患者的内部区域中感兴趣区域的第一输入；以及接收在所述医疗程序期间来自所述临床医生的第二输入，以指示所述感兴趣区域已被检查。9.根据权利要求8所述的设备，其中，所述指令包括引起所述处理器进行以下的指令：在接收来自所述临床医生的第二输入之后，确定所述感兴趣区域包括所述内部区域的部分，其中，所述一个或多个警报包括通知所述临床医生所述感兴趣区域的至少部分未检查的警报。10.根据权利要求8所述的设备，其中，所述处理器响应于确定用于所述医疗程序的医疗仪器进入所述感兴趣区域而生成所述深度模型。11.根据权利要求1所述的设备，其中，当所述深度模型的区域中缺失超过阈值量的深度数据时，所述处理器确定所述图像数据不包括所述内部区域的部分的图像数据。12.根据权利要求1所述的设备，其中，所述指令包括引起所述处理器进行以下的指令：执行第一机器学习算法，以确定所述内部区域内的一个或多个感兴趣区域，并且...
【专利技术属性】
技术研发人员：马里奥斯，
申请(专利权)人：卡尔史托斯两合公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。