内窥镜检查辅助装置、内窥镜检查辅助装置的工作方法以及程序制造方法及图纸

内窥镜检查辅助装置具备：检查状况信息取得部，其基于由内窥镜拍摄被检体内而得到的内窥镜图像和表示内窥镜插入到被检体内的插入部的插入形状的插入形状信息，取得表示使用内窥镜对被检体进行的内窥镜检查中的检查状况的检查状况信息；检查辅助信息生成部，其基于由检查状况信息取得部得到的检查状况信息，生成用于对在所述内窥镜检查中由操作内窥镜的用户进行的插入部的插入操作进行辅助的操作辅助信息；以及手术操作评价部，其基于由检查状况信息取得部得到的检查状况信息，对包含所述内窥镜检查中由用户进行的插入部的插入操作在内的手术操作进行评价，从而生成手术操作评价信息。评价信息。评价信息。

【技术实现步骤摘要】
【国外来华专利技术】内窥镜检查辅助装置、内窥镜检查辅助装置的工作方法以及程序


[0001]本专利技术涉及内窥镜检查辅助装置、内窥镜检查辅助装置的工作方法以及程序。

技术介绍

[0002]在内窥镜领域中，以往提出了用于对由用户进行的各种操作进行辅助的技术，该操作例如为将具有挠性的细长的插入部插入到被检体内的深部的插入操作等。
[0003]具体而言，例如在国际公开第2016/135966号中公开了如下装置：检测内窥镜的插入部的形状，并且基于该插入部的形状来生成表示该插入部的状态的操作辅助信息。
[0004]但是，根据国际公开第2016/135966号所公开的结构，例如产生了如下问题点：为了辅助插入部的插入操作等那样的在内窥镜检查中由用户进行的各种操作而生成的信息被限定为属于可根据该插入部的形状来估计的范围内的信息。因此，根据国际公开第2016/135966号所公开的结构，例如在将插入部向被检体内的深部插入等情况下，产生了与上述问题点相对应的课题，即，有可能无法向用户提示用于促使与内窥镜检查中的状况对应的适当的操作的信息。
[0005]另外，根据国际公开第2016/135966号所公开的结构，例如产生了如下课题：无法在该内窥镜检查结束后向用户提示针对像插入部的插入操作等那样的在内窥镜检查中进行的手术操作的评价。
[0006]本专利技术是鉴于上述情况而完成的，目的在于提供一种能够比以往提高内窥镜检查中的检查质量的内窥镜检查辅助装置、内窥镜检查辅助装置的工作方法以及程序。

技术实现思路

[0007]用于解决问题的手段
[0008]本专利技术的一个方式的内窥镜检查辅助装置具备：检查状况信息取得部，其基于由内窥镜拍摄被检体内而得到的内窥镜图像和表示所述内窥镜插入到所述被检体内的插入部的插入形状的插入形状信息，取得表示使用所述内窥镜对所述被检体进行的内窥镜检查中的检查状况的检查状况信息；检查辅助信息生成部，其基于由所述检查状况信息取得部得到的所述检查状况信息，生成用于对在所述内窥镜检查中由操作所述内窥镜的用户进行的所述插入部的插入操作进行辅助的操作辅助信息；以及手术操作评价部，其基于由所述检查状况信息取得部得到的所述检查状况信息，对包含所述内窥镜检查中由所述用户进行的所述插入部的插入操作在内的手术操作进行评价，从而生成手术操作评价信息。
[0009]在本专利技术的一个方式的内窥镜检查辅助装置的工作方法中，检查状况信息取得部基于由内窥镜拍摄被检体内而得到的内窥镜图像和表示所述内窥镜插入到所述被检体内的插入部的插入形状的插入形状信息，取得表示使用所述内窥镜对所述被检体进行的内窥镜检查中的检查状况的检查状况信息，检查辅助信息生成部基于由所述检查状况信息取得部得到的所述检查状况信息，生成用于对在所述内窥镜检查中由操作所述内窥镜的用户进
行的所述插入部的插入操作进行辅助的操作辅助信息，手术操作评价部基于由所述检查状况信息取得部得到的所述检查状况信息，对包含所述内窥镜检查中由所述用户进行的所述插入部的插入操作在内的手术操作进行评价，从而生成手术操作评价信息。
[0010]本专利技术的一个方式的程序使计算机执行如下处理：基于由内窥镜拍摄被检体内而得到的内窥镜图像和表示所述内窥镜插入到所述被检体内的插入部的插入形状的插入形状信息，取得表示使用所述内窥镜对所述被检体进行的内窥镜检查中的检查状况的检查状况信息；基于所述检查状况信息，生成用于对在所述内窥镜检查中由操作所述内窥镜的用户进行的所述插入部的插入操作进行辅助的操作辅助信息；以及基于所述检查状况信息，对包含所述内窥镜检查中由所述用户进行的所述插入部的插入操作在内的手术操作进行评价，从而生成手术操作评价信息。
附图说明
[0011]图1是示出包含实施方式的内窥镜检查辅助装置的内窥镜系统的主要部分的结构的图。
[0012]图2是用于说明第一实施方式的内窥镜系统的结构的一例的框图。
[0013]图3是用于说明第一实施方式的检查状况信息取得部的结构的一例的框图。
[0014]图4是用于说明在第一实施方式的内窥镜系统中进行的处理中使用的表数据的一例的图。
[0015]图5是用于说明第一实施方式的手术操作评价部的结构的一例的框图。
[0016]图6是用于说明在第一实施方式的内窥镜系统中进行的处理的一例的流程图。
[0017]图7是表示通过第一实施方式的内窥镜系统的处理而显示的显示图像的一例的图。
[0018]图8是用于说明在第一实施方式的内窥镜系统中进行的处理的一例的流程图。
[0019]图9是示意性地示出根据图8的处理进行了插入部的操作的情况下的肠道的状态的一例的图。
[0020]图10是示意性地示出根据图8的处理进行了插入部的操作的情况下的肠道的状态的一例的图。
[0021]图11是示意性地示出根据图8的处理进行了插入部的操作的情况下的肠道的状态的一例的图。
[0022]图12是示出通过第一实施方式的内窥镜系统的处理而显示的显示图像的一例的图。
[0023]图13是用于说明在第一实施方式的内窥镜系统中进行的处理中使用的表数据的一例的图。
[0024]图14是用于说明在第一实施方式的内窥镜系统中进行的处理的与图6不同的例子的流程图。
[0025]图15是用于说明第二实施方式的内窥镜系统的结构的一例的框图。
[0026]图16是用于说明第二实施方式的检查状况信息取得部的结构的一例的框图。
[0027]图17是用于说明第二实施方式的手术操作评价部的结构的一例的框图。
[0028]图18是用于说明在第二实施方式的内窥镜系统中进行的处理的一例的流程图。
[0029]图19是用于说明第三实施方式的内窥镜系统的结构的一例的框图。
[0030]图20是用于说明第三实施方式的检查状况信息取得部的结构的一例的框图。
[0031]图21是用于说明第三实施方式的手术操作评价部的结构的一例的框图。
[0032]图22是用于说明在第三实施方式的内窥镜系统中进行的处理的一例的流程图。
具体实施方式
[0033]以下，参照附图对本专利技术的实施方式进行说明。
[0034](第一实施方式)
[0035]图1～图14是本专利技术的第一实施方式的图。
[0036]例如，如图1所示，内窥镜系统1构成为具有：内窥镜10、主体装置20、插入形状观测装置40、输入装置50以及显示装置60。图1是表示包含实施方式的内窥镜检查辅助装置的内窥镜系统的主要部分的结构的图。
[0037]内窥镜10构成为具有：插入到被检体内的插入部11、设置于插入部11的基端侧的操作部16、以及从操作部16延伸设置的通用软线17。另外，内窥镜10构成为经由设置于通用软线17的端部的镜体连接器(未图示)而相对于主体装置20装卸自如地连接。另外，在插入部11、操作部16以及通用软线17的内部设置有用于传输从主体装置20供给的照明光的光导(未图示)。...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种内窥镜检查辅助装置，其特征在于，具备：检查状况信息取得部，其基于由内窥镜拍摄被检体内而得到的内窥镜图像和表示所述内窥镜插入到所述被检体内的插入部的插入形状的插入形状信息，取得表示使用所述内窥镜对所述被检体进行的内窥镜检查中的检查状况的检查状况信息；检查辅助信息生成部，其基于由所述检查状况信息取得部得到的所述检查状况信息，生成用于对在所述内窥镜检查中由操作所述内窥镜的用户进行的所述插入部的插入操作进行辅助的操作辅助信息；以及手术操作评价部，其基于由所述检查状况信息取得部得到的所述检查状况信息，对包含所述内窥镜检查中由所述用户进行的所述插入部的插入操作在内的手术操作进行评价，从而生成手术操作评价信息。2.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述内窥镜检查辅助装置还具备记录部，所述记录部将包含所述内窥镜检查中得到的多个所述内窥镜图像的内窥镜图像组、包含多个所述插入形状信息的插入形状信息组、以及包含多个所述操作辅助信息的操作辅助时间信息组关联起来，并作为内窥镜检查信息进行记录，所述手术操作评价部基于记录在所述记录部中的所述内窥镜检查信息来生成手术操作评价信息，所述检查状况信息取得部具有：第一识别处理部，其构成为，进行用于识别与1个所述内窥镜图像对应的检查状况而得到第一识别结果的处理；第二识别处理部，其构成为，进行用于识别与时间上连续的多个所述内窥镜图像对应的检查状况而得到第二识别结果的处理；以及检查状况检测处理部，其构成为，使用所述第一识别结果、所述第二识别结果、插入位置信息、插入形状图像中的至少一方来进行处理，从而取得所述检查状况信息，其中，所述插入位置信息是包含在所述插入形状信息中的信息，并且是表示插入到所述被检体内的所述插入部的插入位置的信息，所述插入形状图像是包含在所述插入形状信息中的信息，并且是将插入到所述被检体内的所述插入部的插入形状可视化而得到的信息。3.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述操作辅助时间信息组包含如下信息，该信息能够按每个引导信息来确定将在所述内窥镜检查中生成的多个操作辅助信息各自所包含的多个引导信息提示给所述用户的提示时间，所述手术操作评价部具有：第一分析处理部，其构成为，基于包含在所述内窥镜检查信息中的所述内窥镜图像组来进行分析处理，从而得到包含与所述内窥镜的操作对应的1个以上的评价指标的分析值在内的第一分析结果，所述内窥镜的操作被估计为是在一次所述内窥镜检查中由所述用户进行的；第二分析处理部，其构成为，基于包含在所述内窥镜检查信息中的所述插入形状信息组来进行分析处理，从而得到包含与所述内窥镜的操作对应的1个以上的评价指标的分析值在内的第二分析结果，所述内窥镜的操作被估计为是在一次所述内窥镜检查中由所述用
户进行的；以及评价处理部，其构成为，使用所述第一分析结果、所述第二分析结果、以及包含在所述内窥镜检查信息中的所述操作辅助时间信息组来进行处理，从而生成所述手术操作评价信息。4.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述检查辅助信息生成部构成为，进行用于使所述记录部记录表示估计结果的信息的处理，所述估计结果是估计与所述操作辅助信息所包含的引导信息对应的操作是否已经完成而得到的。5.根据权利要求4所述的内窥镜检查辅助装置，其特征在于，所述手术操作评价部构成为，基于记录在所述记录部中的表示所述估计结果的信息来计算操作完成率，并且生成包含表示计算出的该操作完成率的信息在内的所述手术操作评价信息，其中所述操作完成率相当于在一次所述内窥镜检查中与提示的各引导信息对应的操作所完成的比例。6.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述手术操作评价部构成为，计算表示在一次所述内窥镜检查中进行的手术操作的综合评价的手术操作得分，生成包含计算出的该手术操作得分的所述手术操作评价信息。7.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述内窥镜检查辅助装置还具备检查评价值计算部，所述检查评价值计算部构成为，基于记录在所述记录部中的所述内窥镜检查信息，计算用于评价一次所述内窥镜检查的质量的检查评价值。8.根据权利要求7所述的内窥镜检查辅助装置，其特征在于，所述检查评价值计算部构成为，计算回盲部到达率、肠道清洗度、以及腺瘤检测比例中的至少任意一方，来作为所述检查评价值。9.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述内窥镜检查辅助装置还具备显示控制部，所述显示控制部构成为，进行用于生成与所述操作辅助信息对应的视觉信息并使该视觉信息显示于显示装置的处理，并且进行用于生成与所述手术操作评价信息对应的视觉信息并使该视觉信息显示于显示装置的处理。10.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述内窥镜检查辅助装置还具备构成为进行用于生成并输出与所述引导信息对应的声音的动作的声音产生部。11.根据权利要求1所述的内窥镜检查辅助装置，其特征在于，所述检查辅助信息生成部构成为，进行用于针对与所述插入部的插入操作相关的每个操作难度以不同的模式提示所述引导信息的处理。12.根据权利要求2所述的内窥镜检查辅助装置，其特征在于，所述内窥镜检查辅助装置还具备操作状况检测处理部，所述操作状况检测处理部构成为，取得与表示正在操作所述内窥镜的所述用户的当前的操作状况的信息相当的操作状况信息，所述检查状况检测处理部构成为，使用所述第一识别结果、所述第二识别结果、所述插入位置信息、所述插入形状图像、以及所述操作状况信息中的至少一方来进行处理，从而取
得所述检查状况信息。13.根据权利要求12所述的内窥镜检查辅助装置，其特征在于，所述操作状况检测处理部构成为，基于对拍摄所述用户而得到的影像、能够确定所述用户的运动的运动信息、能够确定所述用户的视线的视线信息、以及从所述用户取得的声音中的至少一方进行检测而得到的检测...

【专利技术属性】
技术研发人员：深津尚希，东条良，藤田浩正，
申请(专利权)人：奥林巴斯株式会社，
类型：发明
国别省市：