一种视网膜OCT图像Bruch膜开角自动检测方法技术

本发明专利技术公开了一种视网膜OCT图像Bruch膜开角自动检测方法，所述方法包括如下步骤：获取三维视网膜OCT图像；采用残差网络提取三维视网膜OCT图像的特征图；采用特征金字塔网络提取三维视网膜OCT图像的多尺度的特征图；将特征图与多尺度的特征图相叠加，获取特征向量；将所述特征向量输入至视乳头感兴趣区域网络中，估计包含Bruch膜开角感兴趣区域；采用Bruch膜角点检测网络检测二维视网膜OCT图像特征和Bruch膜开角感兴趣区域特征，回归Bruch膜开角角点，本发明专利技术可以精确检测出视网膜OCT图像中的Bruch膜开角，进而确定视乳头区域。

An Automatic Detection Method of Bruch Membrane Opening Angle in Retinal OCT Images

【技术实现步骤摘要】
一种视网膜OCT图像Bruch膜开角自动检测方法
本专利技术涉及图像处理分析
，具体涉及一种视网膜OCT图像Bruch膜开角自动检测方法。
技术介绍
：视网膜OCT图像中的Bruch膜角点对于青光眼的诊断具有非常重要的作用。目前现有视网膜OCT图像中的Bruch膜开角检测方法主要是依赖于人工手动的标注，既浪费时间，又由于标注人的认知水平存在差异，使得Bruch膜开角角点或取速度慢、不准确，从而导致青光眼的诊断不及时，错过最佳治疗时机。同时，目前国内外少数已有的视网膜Bruch膜开角角点检测算法都依赖于传统视网膜分层算法，并且算法的鲁棒性、准确性以及实现效率都不理想。
技术实现思路
本专利技术的目的在于提供一种视网膜OCT图像Bruch膜开角自动检测方法，以解决现有技术中导致的上述多项缺陷或缺陷之一。为了解决上述问题，本专利技术是所采用的技术手段为：一种视网膜OCT图像Bruch膜开角自动检测方法，所述方法包括如下步骤：获取三维视网膜OCT图像；采用残差网络提取三维视网膜OCT图像的特征图；采用特征金字塔网络提取三维视网膜OCT图像的多尺度特征图；将残差网络提取的特征图与特征金字塔网络提取的多尺度特征图相叠加，获取三维视网膜OCT图像的特征向量；将所述特征向量输入至视乳头感兴趣区域网络中，估计包含Bruch膜开角感兴趣区域；采用Bruch膜角点检测网络检测二维视网膜OCT图像特征和Bruch膜开角感兴趣区域特征，回归Bruch膜开角角点。进一步的，所述方法还包括：对所述三维视网膜OCT图像进行图像预处理，所述图像预处理包括如下步骤：步骤1、训练三维视网膜OCT图像，对训练得到的二维视网膜OCT图像数据进行标注；步骤2、对标注的二维视网膜OCT图像做归一化处理。本专利技术的优点在于：1、采用深度学习卷积神经网络准确的检测视乳头感兴趣区域，从而使得结合视乳头感兴趣区域特征图获取到的Bruch膜开角角点位置更加准确鲁棒高效；2、从各个三维视网膜OCT图像中均匀的获取训练样本，能够尽可能的增加训练样本的多样性，使模型可以获得更加鲁棒的结果；3、视乳头感兴区域池化层用于统一不同大小的视乳头感兴区域特征图，从而极大的提高了网络的运算速度。附图说明图1为本专利技术具体实施方式视网膜OCT图像Bruch膜开角自动检测方法的流程图；图2为本专利技术具体实施方式视网膜OCT图像Bruch膜开角自动检测方法中特征提取网络的示意图；图3为本专利技术具体实施方式视网膜OCT图像Bruch膜开角自动检测方法中视乳头感兴趣区域网络的示意图；图4为本专利技术具体实施方式视网膜OCT图像Bruch膜开角自动检测方法中Bruch膜开角角点检测网络的示意图；图5为本专利技术具体实施方式视网膜OCT图像Bruch膜开角自动检测方法的结果示意图。具体实施方式为使本专利技术实现的技术手段、创作特征、达成目的与功效易于明白了解，下面结合具体实施方式，进一步阐述本专利技术。如图1至图5所示，一种视网膜OCT图像Bruch膜开角自动检测方法，所述方法包括如下步骤：步骤1：从各个视网膜获取三维视网膜OCT图像，对获取的三维视网膜OCT图像进行训练，对训练得到的二维视网膜OCT图像数据进行统一规则的标注，对标注的二维视网膜OCT图像做归一化处理。三维视网膜OCT图像数据是由一张又一张二维视网膜OCT图像组成的。由有经验的医师与阅片师挑出其中包含视网膜视乳头感兴区域的图像，标注出Bruch膜开角与视乳头的位置，卷积神经网络模型。训练的三维视网膜OCT图像均匀的来自各个视网膜，增加了训练样本的多样性，能够获得更加鲁棒的结果。步骤2：训练得到的二维视网膜OCT图像经过归一化操作以后，送入特征提取网络中，如图2所示，特征提取网络包括主干网络和分支网络，特征提取网络的主干网络是一个50层的残差网络，该主干网络由一个卷积核为7*7大小，步长为2的卷积核，一个核心大小为3*3，步长为2的池化层，与16个残差块组成，每个残差块由两个卷积核为1*1，步长为1，一个卷积核为3*3，步长为1的卷积层串联而成，残差块会将残差块的输入通过一个捷径直接加到残差块的输出上，从而在加深网络以提取深层视网膜特征的同时不会使得视网膜特征过于抽象。由于Bruch膜开角比较小、并且并不是在每一张二维视网膜OCT图像上都是可视的，所以在特征提取网络上又增加了分支网络，分支网络引入了特征金字塔结构提供不同尺度下的特征图。特征金字塔结构独立于特征提取主干残差网络，通过全卷积的方式输出多个级别的按比例大小的特征图，并且横向连接，叠加到对应尺寸的残差块的输出上，获取特征向量。步骤3：将步骤2中特征提取网络获得的特征向量送入视乳头感性区域网络中。图3所示的是视乳头感兴趣区域网络。该网络由两个分支组成，由特征提取网络提取出的特征向量经过一个卷积核大小为3*3，步长为1的卷积层与一个核心大小为2*2，步长为2的池化层后，输入两个分支。分支一通过softmax分类层生成并区分视乳头前景特征与剩下的背景特征，分支二用于生成固定尺寸的候选框，并计算候选框与视乳头感兴趣区域边框的偏移量，最终结合两个分支的输出回归出视乳头区域的坐标信息，两个分支输出的特征图经过通道叠加、卷积后作为输入送入视乳头边框回归的代价函数中。考虑到训练数据标注中视乳头区域的大小类型，视乳头感兴趣区域网络选择了9种尺寸的候选框。由这9种尺寸的候选框遍历图像，送入卷积层计算生成特征图，得到粗略的候选视乳头感兴趣区域特征图，再通过两个边界框回归层拟合出更加准确的乳头感兴趣区域特征图。将各个人候选框的乳头感兴趣区域特征图送入softmax分类层确定是视乳头前景特征还是背景特征，从而完成目标候选区域的初步提取。通过回归微调视乳头前景特征图，这部操作可以简单地分解为缩放和平移，假设输入是A＝(Ax，Ay，Aw，Ah)，目标G'＝(Gx'，Gy'，Gw'，Gh')，则转换为：G′x＝Aw·dx(A)+AxG′y＝Ah.dy(A)+AyG′w＝A、w·exp(dW(A))G′h＝Ah.exp(dh(A))其中，dx(A)是图像列方向上的平移量，dy(A)是图像行方向上的平移量，dw(A)是图像列方向上的缩放比，dh(A)是图像行方向上的缩放比，exp(dw(A))为e的dw(A))次方、(dh(A))为e的dh(A))次方。dx(A)，dy(A)，dw(A)，dh(A)可以通过线性回归：得到，d*(A)是输出目标即回归出的参数，Φ(A)是特征图，是目标回归算子。视乳头感兴趣区域提取用到的代价函数为：其中，是目标图像对应的金标准，是目标回归算子，是网络最终输出的特征向量，T是矩阵转置的运算符，i是目标图像在数据集中的索引，N是数据集大小；通过与训练集标注结果的差异反复迭代，得到准确的视乳头感兴趣区域特征。文中的视乳头感兴区域等同于Bruch膜开角感兴区域，包含Bruch膜开角角点。步骤4：如图4所示，将提取出的视网膜Bruch膜开角感兴趣区域特征作为输入，送入Bruch膜开角角点检测网络中，通过1个视乳头感兴趣区域池化层，5个卷积核为3*3，步长为1的卷积层，一个反卷积层，一个全连接层，回归出最终的Bruch膜开角角点。视乳头感兴趣区域池化层用于统一步骤3中得出的不同大小的视乳头感兴趣区域特本文档来自技高网...

【技术保护点】
1.一种视网膜OCT图像Bruch膜开角自动检测方法，其特征在于，所述方法包括如下步骤：获取三维视网膜OCT图像；采用残差网络提取三维视网膜OCT图像的特征图；采用特征金字塔网络提取三维视网膜OCT图像的多尺度特征图；将残差网络提取的特征图与特征金字塔网络提取的多尺度特征图相叠加，获取三维视网膜OCT图像的特征向量；将所述特征向量输入至视乳头感兴趣区域网络中，估计包含Bruch膜开角感兴趣区域；采用Bruch膜角点检测网络检测二维视网膜OCT图像特征和Bruch膜开角感兴趣区域特征，回归Bruch膜开角角点。

【技术特征摘要】
1.一种视网膜OCT图像Bruch膜开角自动检测方法，其特征在于，所述方法包括如下步骤：获取三维视网膜OCT图像；采用残差网络提取三维视网膜OCT图像的特征图；采用特征金字塔网络提取三维视网膜OCT图像的多尺度特征图；将残差网络提取的特征图与特征金字塔网络提取的多尺度特征图相叠加，获取三维视网膜OCT图像的特征向量；将所述特征向量输入至视乳头感兴趣区域网络中，估计包含Bruch膜开角感兴趣区域；采用Bruch膜角点检测网络检测二维视网膜OCT图像特征和Bruch膜开角感兴趣区域特征，回归Bruch膜开角角点。2.根据权利要求1所述的视网膜OCT图像Bruch膜开角自动检测方法，其特征在于，所述方法还包括：对所述三维视网膜OCT图像进行图像预处理，所述图像预处理包括如下步骤：步骤1、训练三维视网膜OCT图像，对训练得到的二维视网膜OCT图像数据进行标注；步骤2、对标注的二维视网膜OCT图像做归一化处理。3.根据权利要求2所述的一种视网膜OCT图像Bruch膜开角自动检测算法，其特征在于，步骤1中训练的所述三维视网膜OCT图像是从各个三维视网膜OCT图像中均匀获取的。4.根据权利要求1所述的一种视网膜OCT图像Bruch膜开角自动检测算法，其特征在于，所述残差网络包括一个卷积核、一个池化层和若干个残差块，所述残差块包括三个卷积层。5.根据权利要求1所述的一种视网膜OCT图像Bruch膜开角自动检测算法，其特征在于，所述特征金字...

【专利技术属性】
技术研发人员：陈新建，沈宇禾，管丽玲，俞凯，
申请(专利权)人：江西比格威医疗科技有限公司，
类型：发明
国别省市：江西,36