医用图像处理装置、医用图像处理方法及程序制造方法及图纸

本发明专利技术提供一种能够减轻识别器的识别与用户的识别之间的背离的医用图像处理装置、医用图像处理方法及程序。医用图像处理装置具备处理器(210)、存储器(207)及监视器(400)，其中，处理器(204)按时间序列依次获取多个医用图像，基于获取的医用图像，识别医用图像的特定场景，获取识别出的特定场景的识别频率，根据识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示。上变化的识别程度的报知显示。上变化的识别程度的报知显示。

【技术实现步骤摘要】
【国外来华专利技术】医用图像处理装置、医用图像处理方法及程序


[0001]本专利技术涉及医用图像处理装置、医用图像处理方法及程序。

技术介绍

[0002]使用内窥镜装置的诊断及诊察是通过将由内窥镜装置获取的内窥镜图像显示在监视器上，并且医生观察显示在监视器上的内窥镜图像来进行。
[0003]如专利文献1所记载的那样，已知有通过对内窥镜图像进行图像处理来推定病变部，在该病变部重叠标记并显示在监视器上来辅助医生观察的技术。
[0004]以往技术文献
[0005]专利文献
[0006]专利文献1：日本特开2011
‑
87793号公报

技术实现思路

[0007]专利技术要解决的技术课题
[0008]此外，近年来，通过深度学习能够实现图像内的对象物的高精度自动识别。作为对内窥镜装置的深度学习的应用例之一，有时使用通过深度学习制作的识别器。具体地说，用通过深度学习制作的识别器从内窥镜图像中自动进行特定场景的识别，通过将识别出的特定场景提示给用户(医生等)来报知已观察到特定场景。
[0009]但是，识别器识别特定场景的情况和实际上用户观察到的情况有时产生背离。例如，即使在使内窥镜观测器快速移动时瞬间拍摄到特定场景的情况下，识别器也有时会识别出该特定场景，在该情况下，报知用户已识别。另一方面，在瞬间拍摄到特定场景的情况下，用户不会进行该特定场景的观察。这样，识别器识别特定场景的情况和实际上用户观察的情况有时产生背离。
[0010]此外，由于识别器将已观察的情况报知给用户，因此用户尽管本来未观察到该特定场景，也可能看到报知显示而将特定场景误识别为已观察到。
[0011]本专利技术是鉴于这样的情况而完成的，其目的在于提供一种能够减轻识别器的识别与用户的识别之间的背离的医用图像处理装置、医用图像处理方法及程序。
[0012]用于解决技术课题的手段
[0013]作为用于达到上述目的的本专利技术的一方式的医用图像处理装置具备处理器，其中，处理器按时间序列依次获取多个医用图像，基于获取的医用图像，识别医用图像的特定场景，获取识别出的特定场景的识别频率，根据识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示。
[0014]根据本方式，由于根据医用图像的特定场景的识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示，因此能够将处理器中的特定场景的识别频率报知给用户，能够减轻用户观察特定场景的情况与处理器的特定场景的识别之间的背离。
[0015]优选的是，处理器根据识别频率，在监视器上显示不同的颜色作为报知显示。
[0016]优选的是，处理器根据识别频率，在监视器上显示不同的线型作为报知显示。
[0017]优选的是，处理器根据识别频率，在监视器上显示不同的模糊状态作为报知显示。
[0018]优选的是，处理器基于识别出的特定场景的医用图像的张数，获取识别频率。
[0019]优选的是，处理器基于识别出的特定场景的以时间序列连续的医用图像的张数，获取识别频率。
[0020]优选的是，处理器计算特定场景的医用图像的特征量，通过基于特定场景的特征量对医用图像进行分类来识别特定场景。
[0021]优选的是，处理器计算特定场景的医用图像的特征量，基于特征量与医用图像的相似度来识别特定场景。
[0022]优选的是，处理器在识别频率为第一阈值以上的情况下，将报知显示从初始显示切换为第一显示，并显示在监视器上。
[0023]优选的是，处理器在识别频率为大于第一阈值的第二阈值以上的情况下，将报知显示从第一显示切换为第二显示，并显示在监视器上。
[0024]优选的是，处理器在监视器上显示具有多个特定场景的每一个的多个参照图像，进行第一显示及第二显示。
[0025]优选的是，处理器在监视器上显示包括与多个特定场景对应的部位的模型图像，使识别出的特定场景与模型图像相对应，进行第一显示及第二显示。
[0026]优选的是，处理器使识别出特定场景的位置与模型图像上的位置相对应，使报知显示重叠在模型图像上并显示在监视器上。
[0027]优选的是，处理器在尚未识别出特定场景的情况下，在监视器上显示与报知显示不同的初始显示。
[0028]作为本专利技术的另一方式的医用图像处理方法包括：医用图像获取步骤，按时间序列依次获取多个医用图像；特定场景识别步骤，基于获取的医用图像，识别医用图像的特定场景；频率获取步骤，获取通过特定场景识别步骤识别出的特定场景的识别频率；以及显示控制步骤，根据识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示。
[0029]作为本专利技术的另一方式的程序使计算机执行医用图像处理方法，所述医用图像处理方法包括：医用图像获取步骤，按时间序列依次获取多个医用图像；特定场景识别步骤，基于获取的医用图像，识别医用图像的特定场景；频率获取步骤，获取通过特定场景识别步骤识别出的特定场景的识别频率；以及显示控制步骤，根据识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示。
[0030]专利技术效果
[0031]根据本专利技术，能够减轻识别器的识别与用户的识别之间的背离。
附图说明
[0032]图1是内窥镜系统的外观图。
[0033]图2是表示内窥镜系统的主要部分结构的框图。
[0034]图3是图像处理部中的医用图像处理装置的功能框图。
[0035]图4是表示CNN的结构的图。
[0036]图5是表示中间层的结构例的示意图。
[0037]图6是表示医用图像处理方法的流程图。
[0038]图7是识别频率的获取的流程图。
[0039]图8是表示报知显示的例子的图。
[0040]图9是医用图像处理方法的流程图。
[0041]图10是识别频率的获取的流程图。
[0042]图11是表示第一变形例1的具体例的图。
[0043]图12是表示第二变形例1的具体例的图。
[0044]图13是表示第三变形例1的具体例的图。
[0045]图14是表示第四变形例1的具体例的图。
[0046]图15是表示第五变形例1的具体例的图。
[0047]图16是表示第一变形例2的图。
[0048]图17是表示第二变形例2的图。
[0049]图18是表示在两个监视器上进行显示的情况的图。
具体实施方式
[0050]下面，根据附图对本专利技术所涉及的医用图像处理装置、医用图像处理方法及程序的优选实施方式进行说明。
[0051]<内窥镜系统的结构>
[0052]图1是内窥镜系统10的外观图，图2是表示内窥镜系统10的主要部分结构的框图。如图1、2所示，内窥镜系统10由内窥镜观测器100、内窥镜处理器装置200、光源装置300及监视器400构成。此外，内窥镜处理器装置200搭载本专利技术的医用图像本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种医用图像处理装置，具备处理器，其中，所述处理器按时间序列依次获取多个医用图像，基于获取的所述医用图像，识别所述医用图像的特定场景，获取所述识别出的所述特定场景的识别频率，根据所述识别频率，在监视器上显示表示以两个阶段以上变化的识别程度的报知显示。2.根据权利要求1所述的医用图像处理装置，其中，所述处理器根据所述识别频率，在所述监视器上显示不同的颜色作为所述报知显示。3.根据权利要求1或2所述的医用图像处理装置，其中，所述处理器根据所述识别频率，在所述监视器上显示不同的线型作为所述报知显示。4.根据权利要求1至3中任一项所述的医用图像处理装置，其中，所述处理器根据所述识别频率，在所述监视器上显示不同的模糊状态作为所述报知显示。5.根据权利要求1至4中任一项所述的医用图像处理装置，其中，所述处理器基于所述识别出的所述特定场景的所述医用图像的张数，获取所述识别频率。6.根据权利要求1至4中任一项所述的医用图像处理装置，其中，所述处理器基于所述识别出的所述特定场景的以时间序列连续的所述医用图像的张数，获取所述识别频率。7.根据权利要求1至6中任一项所述的医用图像处理装置，其中，所述处理器计算所述特定场景的所述医用图像的特征量，通过基于所述特定场景的所述特征量对所述医用图像进行类别分类来识别所述特定场景。8.根据权利要求1至6中任一项所述的医用图像处理装置，其中，所述处理器计算所述特定场景的所述医用图像的特征量，基于所述特征量与所述医用图像的相似度来识别所述特定场景。9.根据权利要求1至6中任一项所述的医用图像处理装置，其中，所述处理器在所述识别频率为第一阈值以上的情况下，将所述报知显示从初始显示切换为第一显示，并显示在所述监视器上。10.根据权利要求9所述的医用图像处理装置，其中，所述处理器在所述识别频率为大于所述第一阈值的第二阈值以上的...

【专利技术属性】
技术研发人员：大酒正明，
申请(专利权)人：富士胶片株式会社，
类型：发明
国别省市：