图像显示设备、图像显示方法和摄像系统技术方案

一种图像显示设备，其获得通过拍摄眼底的多个摄像区域所获得的多个运动图像和通过拍摄所述眼底的包括所述多个摄像区域的区域所获得的广视角图像。所述多个运动图像各自与基于拍摄运动图像时所获得的生物医学信号的脉冲数据相关联。所述图像显示设备将所述多个运动图像的各运动图像的至少一个帧叠加并显示在所述广视角图像上的基于与所述多个摄像区域的位置有关的信息所确定出的位置处。在所述叠加/显示操作中，所述图像显示设备在基于所述脉冲数据所同步的显示时刻处显示所述多个运动图像。

【技术实现步骤摘要】
【国外来华专利技术】图像显示设备、图像显示方法和摄像系统
本专利技术涉及一种适用于眼科诊疗的图像显示设备、图像显示方法和摄像系统。
技术介绍
为了对与生活方式相关的疾病和作为致盲主要原因的其它疾病进行早期治疗的目的，广泛进行眼部检查。用作基于共焦激光显微镜的原理的眼科设备的扫描激光检眼镜(ScanningLaserOphthalmoscope，SLO)利用用作测量光的激光束对眼底进行光栅扫描，并且基于返回光束的光强度快速获得高分辨率平面图像。下面将用于拍摄平面图像的这类设备称为SLO设备。下面将该平面图像称为SLO图像。近年来，通过在SLO设备中增大测量光的光束尺寸，使得可以获得横向分辨率提高的视网膜的SLO图像。然而，随着测量光的光束尺寸的增大，在获得视网膜的SLO图像时，平面图像的分辨率和SN比由于待检眼的像差而降低。为了解决该问题，开发了包括自适应光学系统的自适应光学SLO设备，其中，自适应光学系统用于使得波前传感器实时测量待检眼的像差，并且使得波前校正装置对在待检眼处发生的测量光及其返回光束的像差进行校正。这类自适应光学SLO设备可以获得高横向分辨率SLO图像。对于血液动力学，比较和观察血管异常的好发部位和其它部位(正常部位)的血管直径和血球速度，对于诊断和经过观察来说是有用的。由于视网膜血管相对于视神经乳头在垂直方向上对称，因而用于检测眼病的早期症状的方法之一是比较上部和下部的血管直径和血球速度。在上述比较和观察操作中，为了充分了解疾病的进展，重要的是识别与运动图像的摄像区域外部的解剖学部位/病变或者正常部位的位置关系。因此，附加地获得广视角图像以用于该比较和观察操作(参考日本特开2010-259543(以下称为文献1))。注意，血管直径或者血流速度可能由于诸如(除由疾病所引起的变化以外的)心动周期、运动或者体温变化等的正常活体反应而变化。因此，为了比较在不同摄像位置处所拍摄的图像，需要在这类活体反应的影响几乎相等的情况下拍摄图像。也就是说，需要获得拍摄图像时诸如脉波等的生物医学信号数据(脉冲数据)、并且分别比较心脏舒张末期时(当血管直径最大、并且血流速度最低时)的血管直径和血流速度。为了比较摄像位置不同的多个运动图像，除由于活体反应所导致的变化以外、还需要避免诸如固视期间的眨眼或者无意识眼动等的眼球/眼睑运动的影响，并且还需要校正由于诸如摄像设备的像差校正位置的差异等的摄像条件的差异所导致的图像特征的差异。作为用于在被检者的活体反应的影响几乎相等的情况下同时显示多个运动图像的方法，日本特开2011-005312(以下称为文献2)记载了这样一种技术：该技术用于根据心脏脉搏来同时显示按照时间序列排列的多个诊断图像。然而，文献2仅记载了用于同时显示同一部位的多种类型的运动图像、或者同一部位不同摄像时刻的运动图像的技术，但是没有说明用于将这些图像的位置与广视角图像上的位置相关联的技术。文献2所述的技术是用于超声波诊断设备的分析/显示技术，但是并没有考虑显示眼科图像应考虑的显示调整，即没有考虑固视期间的眨眼或者无意识眼动的影响以及摄像设备的像差校正位置等。文献1记载了用于将自适应光学SLO图像的摄像区域叠加并显示在宽范围眼底图像上的技术，然而该技术用于单个SLO图像的处理，并且没有考虑用于进行摄像位置不同和摄像时刻不同的SLO图像之间的显示调整的技术。
技术实现思路
本专利技术的实施例提供一种用于通过使得能够容易地比较和观察眼底的多个摄像区域中所拍摄的多个运动图像以支持适当诊断的图像显示设备及其方法。根据本专利技术的一个方面，提供一种图像显示设备，包括：图像获得部件，用于获得广视角图像和多个运动图像，其中所述多个运动图像是通过拍摄眼底的多个摄像区域所获得的、并且各自与基于拍摄该运动图像时所获得的生物医学信号的脉冲数据相关联，以及所述广视角图像是通过拍摄所述眼底的包括所述多个摄像区域的区域所获得的；显示部件，用于将所述多个运动图像的各运动图像的至少一个帧叠加并显示在所述广视角图像上的基于与所述多个摄像区域的位置有关的信息所确定出的位置处；以及同步部件，用于基于所述脉冲数据，使利用所述显示部件的所述多个运动图像的显示时刻同步。此外，根据本专利技术的另一方面，提供一种图像显示设备的图像显示方法，包括以下步骤：获得广视角图像和多个运动图像，其中所述多个运动图像是通过拍摄眼底的多个摄像区域所获得的、并且各自与基于拍摄该运动图像时所获得的生物医学信号的脉冲数据相关联，以及所述广视角图像是通过拍摄所述眼底的包括所述多个摄像区域的区域所获得的；叠加显示步骤，用于将所述多个运动图像的各运动图像的至少一个帧叠加并显示在所述广视角图像上的基于与所述多个摄像区域的位置有关的信息所确定出的位置处；以及基于所述脉冲数据，使所述叠加显示步骤的所述多个运动图像的显示时刻同步。通过以下参考附图对典型实施例的说明，本专利技术的其它特征将显而易见。附图说明图1是示出根据第一实施例的图像显示设备10的功能结构的示例的框图；图2是示出包括根据第一实施例的图像显示设备10的摄像系统的结构的示例的框图；图3是示出能够执行根据实施例的图像显示方法的计算机的硬件结构的示例的框图；图4是示出由根据第一实施例的图像显示设备10所执行的处理的流程图；图5A～5E是用于说明根据第一实施例的图像显示内容的图；图6是示出根据第一实施例的步骤S430中所执行的处理的流程图；图7A和7B是用于说明根据第一实施例的步骤S430中所执行的同步处理的图；图8是示出根据第二实施例的图像显示设备10的功能结构的示例的框图；图9是示出由根据第二实施例的图像显示设备10所执行的处理的流程图；图10A～10C是示出根据第二实施例的步骤S920中所执行的处理的流程图；图11是示出根据第三实施例的图像显示设备10的功能结构的示例的框图；图12是示出由根据第三或第四实施例的图像显示设备10所执行的处理的流程图；图13是示出根据第三实施例的步骤S1240中所执行的处理的流程图；图14是示出根据第四实施例的图像显示设备10的功能结构的示例的框图；以及图15是示出根据第四实施例的步骤S1240中所执行的处理的流程图。具体实施方式下面参考附图，详细说明根据本专利技术的图像显示设备和方法的优选实施例。注意，本专利技术不局限于此。第一实施例基于脉波数据，根据第一实施例的图像显示设备将摄像位置不同的多个SLO运动图像同时显示在基于广视角图像上的摄像位置信息的位置处。在多个SLO运动图像中固视差异、眨眼或者像差校正失败的影响几乎相等的情况下，进行该同步显示操作。更具体地，图像显示设备拍摄不同摄像位置处的多个SLO运动图像Di(i＝1，2，……，n0)，并且分别在拍摄SLO运动图像Di时获得脉波数据Pi(i＝1，2，……，n0)。此后，图像显示设备根据各SLO运动图像Di来判断受到了固视差异或眨眼等的影响的例外帧，并且基于相应脉波数据Pi的极值来从SLO运动图像Di中选择要显示的帧编号序列。此时，设备选择要显示的帧编号序列以排除所确定的例外帧。图像显示设备针对所选择的帧编号序列的帧组调整SLO运动图像Di之间的重放速度，并且基于拍摄图像时所获得的固视目标位置Fi(i＝1，2，……，n0)将该帧组同时显示在广视角SLO图像W上。该处理使得由于本文档来自技高网...

【技术保护点】
一种图像显示设备，其特征在于，包括：图像获得部件，用于获得广视角图像和多个运动图像，其中所述多个运动图像是通过拍摄眼底的多个摄像区域所获得的、并且各自与基于拍摄该运动图像时所获得的生物医学信号的脉冲数据相关联，以及所述广视角图像是通过拍摄所述眼底的包括所述多个摄像区域的区域所获得的；显示部件，用于将所述多个运动图像的各运动图像的至少一个帧叠加并显示在所述广视角图像上的基于与所述多个摄像区域的位置有关的信息所确定出的位置处；以及同步部件，用于基于所述脉冲数据，使利用所述显示部件的所述多个运动图像的显示时刻同步。

【技术特征摘要】
【国外来华专利技术】2012.02.20 JP 2012-0345361.一种图像显示设备，其特征在于，包括：图像获得部件，用于获得第一运动图像和第二运动图像、第一脉冲数据和第二脉冲数据以及广视角图像，其中所述第一运动图像和所述第二运动图像是在眼底的不同的摄像位置处所拍摄的、并且分别与基于拍摄所述第一运动图像和所述第二运动图像时所获得的生物医学信号的所述第一脉冲数据和所述第二脉冲数据相关联，以及所述广视角图像是通过拍摄包括所述第一运动图像和所述第二运动图像的摄像位置的区域所获得的；同步部件，用于基于所述第一脉冲数据和所述第二脉冲数据，使所述第一运动图像和所述第二运动图像的显示时刻同步；以及显示控制部件，用于基于所述显示时刻，在显示单元上将所述第一运动图像和所述第二运动图像分别同步显示在所述广视角图像上的拍摄所述第一运动图像和所述第二运动图像的摄像位置处。2.根据权利要求1所述的图像显示设备，其中，还包括：判断部件，用于基于所述第一运动图像和所述第二运动图像各自的多个帧各自的图像特征，从所述多个帧中判断例外帧，其中，所述同步部件从所述第一运动图像和所述第二运动图像中分别选择同步要显示的区间，以限制所述例外帧的显示。3.根据权利要求2所述的图像显示设备，其中，所述同步部件从所述第一脉冲数据和所述第二脉冲数据的相位对于所述第一运动图像和所述第二运动图像是共通的、并且所述例外帧的数量不大于预定数量的区间中，分别选择所述同步要显示的区间。4.根据权利要求2所述的图像显示设备，其中，所述图像特征是亮度、图像失真量、信噪比和帧间移动量中的至少一个。5.根据权利要求2至4中任一项所述的图像显示设备，其中，还包括：位置对准部件，用于使用所述第一运动图像和第二运动图像各自中的各帧的图像特征，来进行帧间的位置对准，其中，所述判断部件在所述位置对准之前基于单个帧的图像特征来判断所述例外帧，并且在所述位置对准之后基于与相对于另一帧的差相关联的图像特征来判断所述例外帧。6.根据权利要求5所述的图像显示设备，其中，所述判断部件使用用于所述位置对准的图像特征来判断所述例外帧。7.根据权利要求2至4中任一项所述的图像显示设备，其中，所述同步部件进行帧的内插以及添加或删除，以使得所述同步要显示的区间中所述第一脉冲数据和所述第二脉冲数据的一个周期的帧的数量分别在所述第一运动图像和所述第二运动图像之间的差落入预定范围内。8.根据权利要求2至4中任一项所述的图像显示设备，其中，所述广视角图像是运动图像，以及所述图像显示设备...

【专利技术属性】
技术研发人员：今村裕之，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本;JP