本申请涉及一种视频流方法、装置、计算机设备和存储介质，获取视频流中视频帧的信息，视频帧的信息包括多个子区域的子区域掩码；组合子区域掩码，根据子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图；根据掩码图生成热力图，并结合掩码图和热力图得到结合图，根据结合图提取候选标志部位的特征；比对候选标志部位的特征与预设库中的特征，根据比对的结果识别视频帧的实际标志部位。采用本方法能够提高标志部位的识别精度，解决通过内镜检查视频识别标志部位时精度低的问题。检查视频识别标志部位时精度低的问题。检查视频识别标志部位时精度低的问题。
【技术实现步骤摘要】
视频流处理方法、装置、计算机设备和存储介质
[0001]本申请涉及视频图像处理
，特别是涉及一种视频流方法、装置、计算机设备和存储介质。
技术介绍
[0002]内镜检查作为现代医学诊断和治疗的重要手段，广泛运用在胃肠、鼻咽喉、膀胱、支气管等多个人体部位的检查中，医生通过内镜能详细检查病人的各部位病变情况，更好地做出诊断；内镜检查最关键的环节，就是去查看各种标志部位，确保标志部位不能漏查，但在实际的检查中，由于人体内部结构复杂，且不同部位需要的标志位也众多，可能会导致反复检查进而引起病人不适，也可能会因为某些标志位没抓拍到，影响检查质量。
[0003]相关技术中，通过鼻咽喉十几个标志部位建立拓扑结构，提取其关键节点，从而实现标志部位的提取，并通过正矩形框对标志部位进行识别。但实际检查时很多部位随着病人的呼吸、身体轻微扭动都会产生部位形状的变化，此时关键点的拓扑结构也会随着变化，检测效果会很不准确。另外，还有很多标志部位本身并不具备明显的结构，无法提取其关键点。再者，内镜检查中，实际很多部位都是粘连在一起的，基于正矩形框的识别，无法排除粘连部位的干扰，降低了识别精度。
[0004]针对相关技术中存在通过内镜检查视频对标志部位识别时精度低的问题，目前还没有提出有效的解决方案。
技术实现思路
[0005]基于此，有必要针对上述技术问题，提供一种能够提高对标志部位的识别精度的视频流方法、装置、计算机设备和存储介质。
[0006]第一方面，本申请提供了一种视频流处理方法，所述方法包括：
[0007]获取视频流中视频帧的信息，所述视频帧的信息包括多个子区域的子区域掩码；
[0008]组合所述子区域掩码，根据所述子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图；
[0009]根据所述掩码图生成热力图，并结合所述掩码图和所述热力图，得到结合图，根据所述结合图提取所述候选标志部位的特征；
[0010]比对所述候选标志部位的特征与预设库中的特征，根据比对的结果识别所述视频帧的实际标志部位。
[0011]在其中一个实施例中，获取视频流中视频帧的信息，包括：
[0012]接收内镜检查时生成的视频流，提取所述视频流中的视频帧；
[0013]对所述视频帧进行分割，根据分割的结果获取所述视频帧的信息。
[0014]在其中一个实施例中，根据所述子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图，包括：
[0015]获取所述视频帧中第一子区域的第一子区域掩码，以及所述视频帧中第二子区域
的第二子区域掩码，其中，所述第一子区域与所述第二子区域之间的距离处于预设范围之内；
[0016]当所述第一子区域与所述第二子区域之间的距离处于第一预设范围之内，根据所述第一子区域掩码生成所述掩码图；
[0017]当所述第一子区域与所述第二子区域之间的距离处于第二预设范围之内，根据所述第一子区域掩码和所述组合后的子区域掩码，生成所述掩码图。
[0018]在其中一个实施例中，根据所述子区域掩码和组合后的所述子区域掩码，生成候选标志部位的掩码图，包括：
[0019]根据所述子区域掩码和组合后的所述子区域掩码，确定候选标志部位；
[0020]获取所述候选标志部位和第一预设值，根据所述第一预设值为所述候选标志部位赋值；
[0021]获取所述视频帧中除了所述候选标志部位以外的非候选标志部位和第二预设值，根据所述第二预设值为所述非候选标志部位赋值；
[0022]根据赋值的结果生成所述掩码图。
[0023]在其中一个实施例中，结合所述掩码图和所述热力图包括：
[0024]按照预设权重将所述掩码图的通道和所述热力图的通道进行通道合并。
[0025]在其中一个实施例中，包括：
[0026]获取第一子区域的第一子区域编码，以及第二子区域的第二子区域编码；
[0027]在所述第一子区域编码的基础上组合所述第二子区域编码，根据组合结果和所述第一子区域编码，得到与所述第一子区域对应的掩码队列；
[0028]为所述第一子区域编号，根据所述第一子区域的编号顺序，将与所述第一子区域对应的掩码队列加入到比对队列中；
[0029]通过所述比对队列确定所述候选标志部位的比对顺序。
[0030]在其中一个实施例中，在比对所述候选标志部位的特征与预设库中的特征之前，所述方法还包括：
[0031]根据所述视频流的类型，获取与对应的标志部位数据库；
[0032]获取所述标志部位数据库中的标志部位图，生成所述标志部位图的掩码图和所述标志部位图的热力图，并结合所述标志部位图的掩码图和所述标志部位图的热力图，得到所述标志部位图的结合图；
[0033]根据所述标志部位图的结合图，提取得到所述标志部位图的特征，得到所述预设库。
[0034]第二方面，本申请还提供了一种视频流处理装置，所述装置包括检查模块、处理模块和显示模块，所述检查模块和所述处理模块连接，所述处理模块和显示模块连接；其中，
[0035]检查模块，用于获取视频流；
[0036]处理模块，用于实现上述第一方面任一项所述方法的步骤；
[0037]显示模块，用于显示所述处理模块的处理结果。
[0038]第三方面，本申请还提供了一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述第一方面任一项所述方法的步骤。
[0039]第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面任一项所述方法的步骤。
[0040]上述视频流方法、装置、计算机设备和存储介质，获取视频流中视频帧的信息，所述视频帧的信息包括多个子区域的子区域掩码；组合所述子区域掩码，根据所述子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图；根据所述掩码图生成热力图，并结合所述掩码图和所述热力图，根据结合后的所述掩码图和所述热力图，提取所述候选标志部位的特征；比对所述候选标志部位的特征与预设库中的特征，根据比对的结果识别所述视频帧的实际标志部位，提高了标志部位的识别精度，解决了通过内镜检查视频对标志部位识别时精度低的问题。
附图说明
[0041]图1为本申请一个实施例中视频流处理方法的流程图；
[0042]图2为本申请一个实施例中标志部位识别的流程图；
[0043]图3为本申请一个实施例中基于掩码的检索方法示意图；
[0044]图4为本申请一个实施例中的视频流处理装置；
[0045]图5为本申请一个实施例中计算机设备的内部结构图。
具体实施方式
[0046]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频流处理方法，其特征在于，所述方法包括：获取视频流中视频帧的信息，所述视频帧的信息包括多个子区域的子区域掩码；组合所述子区域掩码，根据所述子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图；根据所述掩码图生成热力图，并结合所述掩码图和所述热力图，得到结合图，根据所述结合图提取所述候选标志部位的特征；比对所述候选标志部位的特征与预设库中的特征，根据比对的结果识别所述视频帧的实际标志部位。2.根据权利要求1所述的方法，其特征在于，获取视频流中视频帧的信息，包括：接收内镜检查时生成的视频流，提取所述视频流中的视频帧；对所述视频帧进行分割，根据分割的结果获取所述视频帧的信息。3.根据权利要求1所述的方法，其特征在于，根据所述子区域掩码和组合后的子区域掩码，生成候选标志部位的掩码图，包括：获取所述视频帧中第一子区域的第一子区域掩码，以及所述视频帧中第二子区域的第二子区域掩码，其中，所述第一子区域与所述第二子区域之间的距离处于预设范围之内；当所述第一子区域与所述第二子区域之间的距离处于第一预设范围之内，根据所述第一子区域掩码生成所述掩码图；当所述第一子区域与所述第二子区域之间的距离处于第二预设范围之内，根据所述第一子区域掩码和所述组合后的子区域掩码，生成所述掩码图。4.根据权利要求1所述的方法，其特征在于，根据所述子区域掩码和组合后的所述子区域掩码，生成候选标志部位的掩码图，包括：根据所述子区域掩码和组合后的所述子区域掩码，确定候选标志部位；获取所述候选标志部位和第一预设值，根据所述第一预设值为所述候选标志部位赋值；获取所述视频帧中除了所述候选标志部位以外的非候选标志部位和第二预设值，根据所述第二预设值为所述非候选标志部位赋值；根据赋值的结果生成所述掩码图。5.根据权...
【专利技术属性】
技术研发人员：周奇明，姚卫忠，
申请(专利权)人：浙江华诺康科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。