内窥镜业务辅助系统和内窥镜业务辅助方法技术方案

一种内窥镜业务辅助系统，其特征在于，具有：图像存储部，其存储按照时间序列取得的多个内窥镜图像；三维数据生成部，其根据图像存储部所存储的多个内窥镜图像，生成表示观察对象的规定部位的三维形状的三维数据；二维图像生成部，其根据由三维数据生成部生成的三维数据，生成与所输入的视点位置和视线方向对应的二维图像；以及显示控制部，其使由二维图像生成部生成的二维图像显示在规定的显示部上。

【技术实现步骤摘要】
【国外来华专利技术】内窥镜业务辅助系统和内窥镜业务辅助方法
本专利技术涉及辅助内窥镜业务的技术。
技术介绍
在内窥镜检查中，将由被插入患者的体内的内窥镜所取得的影像的内窥镜图像实时显示在显示装置上。医生通过观察显示在显示装置上的影像，得到诊断意见。此外，在内窥镜检查中，通常记录有多个内窥镜图像。现有技术文件专利文献专利文献1：日本特开2016-062488号公报
技术实现思路
专利技术要解决的课题在检查中所记录的内窥镜图像有时用于患者的诊断。例如，有时用于第二诊治意见(secondopinion)的诊断。医生在进行诊断时，大多观察生物体表面的凹凸。在使用内窥镜图像进行诊断的情况下，对于该医生而言，为了更准确地掌握生物体表面的凹凸，可能产生想要观察从与所准备的内窥镜图像不同的位置、方向拍摄出的内窥镜图像这一请求。这样的课题不限于通过拍摄有患者的体内的内窥镜图像对患者进行诊断的情况，也可以在通过拍摄有其他观察对象的图像对该观察对象进行诊断的情况、例如通过拍摄有管、机械、构造物等的内部的图像对它们进行诊断的情况下发生。本专利技术是鉴于这样的状况而完成的，其目的在于提供一种能够使用内窥镜图像更准确地诊断观察对象的技术。用于解决课题的手段为了解决上述课题，本专利技术的一个方式的图像处理系统具有：图像存储部，其存储按照时间序列取得的多个内窥镜图像；三维数据生成部，其根据图像存储部所存储的多个内窥镜图像，生成表示观察对象的规定部位的三维形状的三维数据；二维图像生成部，其根据由三维数据生成部生成的三维数据，生成与所输入的视点位置和视线方向对应的二维图像；以及显示控制部，其使由二维图像生成部生成的二维图像显示在规定的显示部上。本专利技术的另一方式是图像处理方法。该方法由能够访问规定的存储区域的图像处理系统执行，该规定的存储区域存储按照时间序列取得的多个内窥镜图像，其特征在于，所述内窥镜业务辅助方法包含以下步骤：根据存储区域所存储的多个内窥镜图像，生成表示体内的规定部位的三维形状的三维数据；根据所生成的三维数据，生成与所输入的视点位置和视线方向对应的二维图像；以及使所生成的二维图像显示在规定的显示部上。另外，以上的结构要素的任意组合、在方法、装置、系统、记录介质、计算机程序等之间对本专利技术的表现进行转换后的方式，作为本专利技术的方式，也是有效的。附图说明图1是示出第1实施方式的内窥镜业务辅助系统的结构的图。图2是示出图1的图像管理装置的结构的图。图3是示出图2的检查信息存储部的数据结构的图。图4是示出诊断辅助装置的结构的图。图5是示出检查信息一览的例子的图。图6是用于说明提取部对内窥镜图像的提取的图。图7的(a)～(c)是示出检查时的内窥镜的前端部121a的情形的图。图8是示出第5实施方式的内窥镜业务辅助系统的图像管理装置的结构的图。具体实施方式下面，参照附图详细地说明用于实施本专利技术的方式。在附图的说明中，对相同要素标注相同的标号，并适当省略重复说明。(第1实施方式)图1是示出实施方式的内窥镜业务辅助系统1的结构的图。内窥镜业务辅助系统1是用于辅助内窥镜业务的系统，具有以内窥镜系统10总称的多个内窥镜系统10a、10b、图像管理装置20和以诊断辅助装置30总称的多个诊断辅助装置30。内窥镜系统10和诊断辅助装置30通过网络与图像管理装置20连接。诊断辅助装置30可以设置于与内窥镜系统10在地理上分开的场所。同样地，图像管理装置20可以设置于与内窥镜系统10和/或诊断辅助装置30在地理上分开的场所。内窥镜系统10具有内窥镜12、处理装置14和显示装置16。内窥镜12包含插入部121和操作部122。在位于插入部121的前端的前端部121a设置有摄像元件。第1医生将内窥镜12的插入部121从例如嘴或鼻插入患者的体内。设置于前端部121a的摄像元件拍摄患者的体内。拍摄出的图像(以下，称作“内窥镜图像”)输出到处理装置14。操作部122包含在检查开始时被按下的检查开始按钮、在检查结束时被按下的检查结束按钮、以及用于改变前端部121a的方向的、即用于弯曲插入部121的前端的角度旋钮。处理装置14统一地控制内窥镜系统10整体。处理装置14的一个重要作用在于将由内窥镜12按照时间序列取得的多个内窥镜图像发送到图像管理装置20并存储到数据库中，另一个重要作用在于使由内窥镜12取得的影像实时地显示在显示装置16上。在内窥镜检查(以下，简称为“检查”)的开始之前，第1医生使用键盘等用户接口将作为用于识别检查的信息的检查ID、以及作为用于识别患者的信息的患者ID输入到处理装置14。第1医生按下内窥镜12的操作部122的开始按钮以开始检查。处理装置14将包含检查ID、患者ID和检查日期的检查开始信息发送到图像管理装置20。第1医生通过一边操作内窥镜12一边观察显示装置16上所实时显示的影像，得到诊断意见。第1医生按下结束按钮以结束检查。处理装置14将包含检查ID、患者ID和检查日期的检查结束信息发送到图像管理装置20。在从按下开始按钮到按下结束按钮的检查期间内，从内窥镜12向处理装置14以固定的时间间隔(例如，(A)秒间隔)输出内窥镜图像。处理装置14在上述的两个重要作用中的前者的作用中，对以固定的时间间隔输出的内窥镜图像附加元数据。处理装置14在每次输出或检查结束之后将附加有元数据的内窥镜图像集中发送到图像管理装置20。在元数据中至少包含用于识别内窥镜图像的信息(图像ID)、用于识别患者的信息(患者ID)、用于识别检查的信息(检查ID)和表示摄影日期的摄影日期信息。图2是示出图像管理装置20的结构的图。图像管理装置20对由内窥镜12拍摄出的内窥镜图像进行管理。图像管理装置20具有控制部22和存储部24。控制部22包含内窥镜图像登记部221、检查信息登记部222、提取部223、三维数据生成部224、检查信息发送部225和三维数据发送部226。存储部24包含检查信息存储部241、内窥镜图像存储部242和三维数据存储部243。控制部22的功能能够通过硬件资源和软件资源的协作或者仅通过硬件资源来实现。作为硬件资源，能够使用处理器、ROM、RAM、其他LSI。作为软件资源，能够使用操作系统、应用程序等程序。对于后述的控制部36也同样如此。存储部24是大容量的辅助存储装置，可以由HDD(硬盘驱动器)或闪存构成。关于后述的存储部38也同样如此。内窥镜图像存储部242存储从处理装置14发送的内窥镜图像，具体而言，存储在各检查中从检查开始起到检查结束为止以固定的时间间隔拍摄出的全部图像。内窥镜图像与图像ID以及检查ID对应起来存储。三维数据存储部243存储由三维数据生成部224如后述那样生成的三维数据。图3是示出检查信息存储部241的数据结构的图。检查信息存储部241存储检查信息，具体而言，将检查ID、患者ID、检查日期和图像信息对应起来存储。在“图像本文档来自技高网...

【技术保护点】
1.一种内窥镜业务辅助系统，其特征在于，具备：/n图像存储部，其存储按照时间序列取得的多个内窥镜图像；/n三维数据生成部，其根据所述图像存储部所存储的多个内窥镜图像，生成表示观察对象的规定部位的三维形状的三维数据；/n二维图像生成部，其根据由所述三维数据生成部生成的三维数据，生成与所输入的视点位置和视线方向对应的二维图像；以及显示控制部，其使由所述二维图像生成部生成的二维图像显示在规定的显示部上。/n

【技术特征摘要】
【国外来华专利技术】1.一种内窥镜业务辅助系统，其特征在于，具备：
图像存储部，其存储按照时间序列取得的多个内窥镜图像；
三维数据生成部，其根据所述图像存储部所存储的多个内窥镜图像，生成表示观察对象的规定部位的三维形状的三维数据；
二维图像生成部，其根据由所述三维数据生成部生成的三维数据，生成与所输入的视点位置和视线方向对应的二维图像；以及显示控制部，其使由所述二维图像生成部生成的二维图像显示在规定的显示部上。


2.根据权利要求1所述的内窥镜业务辅助系统，其特征在于，
所述图像存储部将多个内窥镜图像各自与表示拍摄时的针对内窥镜的操作的操作信息对应起来存储。


3.根据权利要求2所述的内窥镜业务辅助系统，其特征在于，
所述三维数据生成部根据多个内窥镜图像和多个内窥镜图像各自的操作信息，生成三维数据。


4.根据权利要求2或3所述的内窥镜业务辅助系统，其特征在于，
所述内窥镜业务辅助系统还具有提取部，所述提取部从所述图像存储部所存储的多个内窥镜图像中，根据操作信息提取内窥镜图像，
所述三维数据生成部根据由所述提取部提取出的内窥镜图像，生成三维数据。


5.根据权利要求4所述的内窥镜业务辅助系统，其特征在于，
所述提取部根据操作信息确定针对内窥镜的插入部的前端部的操作量，从所述图像存储部所存储的多个内窥镜图像中提取在操作量较多的期间、或在操作量较多的期间及其附近的期间拍摄出的内窥镜图像。

【专利技术属性】
技术研发人员：堀江原，
申请(专利权)人：奥林巴斯株式会社，
类型：发明
国别省市：日本;JP