一种基于平衡性联合网络的鱼类多目标跟踪方法技术

技术编号:32743240 阅读:27 留言:0更新日期:2022-03-20 08:50
本发明专利技术公开了属于水产养殖技术领域的一种基于平衡性联合网络的鱼类多目标跟踪方法。该方法是基于中国农业人工智能创新创业大赛数据集,在原数据集基础上进行了优化整理补充,生成了新的OptMFT数据集;通过对数据集做了合并训练,来进一步加强对于复杂环境下的模型的鲁棒性;同时,对一些图像质量较差的负样本图像帧进行了剔除,强化了鱼类目标明显、游动轨迹清晰的数据的训练权重,进一步提升模型对于鱼类识别的精度,并对数据集做了全帧训练来增强模型对于鱼群高速游动情况下的鲁棒性验证;本发明专利技术应用范围广泛,在多个养殖环境下都能起到很好的效果,实用性强。实用性强。实用性强。

【技术实现步骤摘要】
一种基于平衡性联合网络的鱼类多目标跟踪方法


[0001]本专利技术属于水产养殖
,特别涉及一种基于平衡性联合网络的鱼类多目标跟踪方法。

技术介绍

[0002](1)传统集约化养殖池水产养殖的缺陷与问题
[0003]对于集约化养殖池水产养殖模式,水中溶解氧的高低对鱼类的摄食、饵料的消化、鱼类的生长都会产生重要影响。溶解氧含量过低时,将导致鱼类出现食欲降低、消化吸收率低、生长迟缓等不良症状,含氧量过低时会导致鱼类的缺氧死亡,严重影响水产养殖产量。从鱼类的生理、行为角度分析,溶解氧低会导致鱼类出现集群浮头、跳水行为、甚至在水面急速游动与不规律游动、体色灰暗变淡、鱼眼产生白膜等现象。因此可通过鱼类的多目标跟踪方法来判断鱼群是否存在异常行为,为智能养殖提供依据。
[0004]目前,在我国水产养殖业中存在一些不合理现象,在生态不同的养殖环境,水产养殖种类中十分常见。如果特定区域适合某种类型的生物水产养殖,则水生生物量将严重超过环境负荷,长期密集的养殖在当地地区具有单一结构,很容易造成生态系统的能量和物质枯竭,导致生态失衡,赤潮和病原生本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于平衡性联合网络的鱼类多目标跟踪方法,其特征在于,包括以下步骤:步骤1数据集建立与优化,基于中国农业人工智能创新创业大赛数据集,在原数据集基础上进行了优化整理补充,生成了新的OptMFT数据集;通过对数据集做了合并训练,来进一步加强对于复杂环境下的模型的鲁棒性;同时,对一些图像质量较差的负样本图像帧进行了剔除,强化了鱼类目标明显、游动轨迹清晰的数据的训练权重,来进一步提升模型对于鱼类识别的精度;除此之外,对数据集做了全帧训练来增强模型对于鱼群高速游动情况下的鲁棒性验证;所述鱼类多目标跟踪模型在优化的鱼类多目标跟踪数据集OptMFT上进行试验,主要为养殖桶内的鱼类游动行为数据,摄像头采用海康威视摄像机进行拍摄,视频帧率为25帧/秒;为使该数据集进一步适合本模型的训练,对数据集进行了重新优化整理;步骤2鱼类多目标跟踪算法的设计与优化,设计了一种平衡性的鱼类多目标跟踪网络来实现多目标跟踪;即鱼类多目标跟踪模型利用嵌入可变形卷积的ResNet

101作为网络的骨干网;利用四个不同的检测跟踪头部进行低维度特征的提取,对高分辨率特征图信息进行双分支使用;将检测器与跟踪器融合到同一个网络中实现,利用检测、跟踪两个分支分别实现鱼类目标的识别与跟踪匹配;在两个分支前设计四个不同的检测、跟踪头部来提取分支所需的特征信息,对骨干网提取的高分辨率特征图进行特征信息的有效提取,在检测中使用anchor

free方法进行鱼类目标的精确定位,跟踪中借鉴DeepSORT思想进行目标匹配与重识别,在复杂的养殖池环境下实现了鱼类目标的高精度跟踪与个体信息保持;步骤3模型训练评价,在模型训练中使用旷世天元的鱼类多目标跟踪数据集,该数据集中存在着鱼饵残留、光斑影响、水面波纹扰动、鱼群的密集分布产生的互相遮挡、鱼群突然加速导致目标丢失、对比度多变的问题;要求训练模型具有较高的鲁棒性;在训练中使用了Ubuntu 18.04.2LTS系统,采用1张NVIDIA Tesla V100显卡进行模型训练与消融实验;并在该数据集上进行了测试验证;对OptMFT数据集做了全帧训练来增强模型对于高速游动情况下的鲁棒性;在鱼类多目标跟踪中利用验证模型进行验证:将平衡性联合鱼类多目标跟踪网路与经典算法在OptMFT_light数据集上进行了比较:首先,以Faster RCNN

50

FPN和Faster RCNN

101

FPN作为检测器的骨干网络训练;经过SORT、DeepSORT、Tracktor实验测试验证;以评估检测和重新识别的性能。2.根据权利要求1所述基于平衡性联合网络的鱼类多目标跟踪方法,其特征在于,所述步骤2中在复杂的养殖池环境下实现了鱼类目标的高精度跟踪与个体信息保持。具体采用计算机视觉与深度学习技术的鱼类多目标跟踪方法,包括如下步骤:(1)利用上述改进的OptMFT数据集作为模型的训练集,统一图像尺...

【专利技术属性】
技术研发人员:李振波李蔚然张涵钰杨普徐子毓
申请(专利权)人:中国农业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1