一种多元融合的船舶身份识别方法技术

本发明专利技术公开了一种多元融合的船舶身份识别方法，包括视频输入、船舶目标检测、船舶图像位置获取、转换实际位置、AIS数据获取、AIS数据解析、船舶AIS位置获取、获取AIS船名、获取船舶图像、船名定位识别、获取图像船名与对AIS船名和图像船名进行识别。本发明专利技术结合AIS和视频图像识别技术的优点，可以在船舶没有开启AIS的情况下获取船舶身份，提升了船舶身份识别的准确率，为水上执法监管提供了基础，其次在AIS船名与图像识别船名相互校验比对时，提升了船舶身份的可靠性，既解决了未开AIS船舶身份无法识别的问题，还可以对船名不规范的船舶用AIS作为身份补充，提升船舶身份识别准确率，具备一定的使用前景。一定的使用前景。一定的使用前景。

【技术实现步骤摘要】
一种多元融合的船舶身份识别方法


[0001]本专利技术涉及船舶监管领域
，具体为一种多元融合的船舶身份识别方法。

技术介绍

[0002]船舶身份识别方法是用于水上执法、海事监管、船舶监管领域的信息处理方法，目前船舶身份识别方法有以下三种，首先是AIS识别方法，AIS是船舶自动识别系统，装载AIS的船舶可主动向外部交换船位、航速、航向、船名、呼号等重要信息，但这种方法属于被动接收式，船舶未装载AIS、人为关闭或篡改AIS等情况时有发生，据统计长江江苏段AIS开机率约为80％，有20％的船舶身份无法通过AIS获得；其次是RFID识别方法，内河航道的船舶安装有船用RFID电子标签，电子标签用于标识船舶身份，安装在航道堤岸上的RFID读卡器可识别300m以内的RFID标签，达到识别身份的目的，但是船舶一旦靠近识别范围内就可被识别到，造成可能有多艘船被同时识别，且无法区分多船身份；最后是视频图像识别方法，是通过采集船舶照片，识别船名字符达到识别船舶身份的目标，很多内河船舶船名不规范，有标识不清、船名遮挡、船名标识模糊等问题，仅依靠图像识别船名字符难度大，准确率不高，可靠性低，需要设计一种多元融合的船舶身份识别方法。

技术实现思路

[0003]本专利技术提供一种多元融合的船舶身份识别方法可以解决上述
技术介绍
中的问题。
[0004]为实现上述目的，本专利技术提供如下技术方案：
[0005]一种多元融合的船舶身份识别方法，所述船舶身份识别方法包括以下步骤：
[0006]步骤一，基于视频采用背景建模方法检测船舶在图像中的位置坐标；
[0007]步骤二，根据船舶在图像中的位置坐标获取船舶高清图像，并采用深度学习方法对船名区域进行定位和识别，得到图像识别船名；
[0008]步骤三，利用AIS接收终端获取船舶AIS信息，并对船舶AIS信息进行解析，得到解析信息，包括：AIS船名和AIS船舶位置；
[0009]步骤四，将船舶在图像中的位置坐标通过相机成像原理变换成世界坐标系下的船舶位置坐标，将世界坐标系下的船舶位置坐标与步骤三解析得到的AIS船舶位置进行匹配，如果满足匹配条件，则认为匹配上，进入步骤五，否则以步骤二得到的图像识别船名作为最终的船舶身份；
[0010]步骤五，当船舶既有AIS船名又有图像识别船名时，判断两者是否相等，若相等，则以图像识别船名作为最终的船舶身份，若不相等，则判断图像识别船名的置信度是否大于第二预设阈值，如果是，则以图像识别船名作为最终的船舶身份，反之，以AIS船名作为最终的船舶身份。
[0011]优选的，所述步骤二中，采用预先训练好的yolo v5检测模型对船名区域进行定位和识别，其中yolo v5检测模型的训练过程如下：采集包括白天、夜晚、雨天和雾天不同场景下包含船名的图像作为数据集，并对数据集中的船名位置进行人工标定；对于人工标定后
的数据集采用马赛克增强机制进行丰富，即任选4张图像作为一个组合进行随机裁剪和缩放后，再随机排列拼接形成一张新的图像，重复上述操作，直至没有新的组合为止，利用丰富后的数据集对yolo v5检测模型进行训练，得到训练好的yolo v5检测模型；
[0012]利用训练好的yolo v5检测模型对船名区域进行识别，得到图像识别船名。
[0013]优选的，所述步骤二中，根据船舶在图像中的位置坐标利用抓拍相机获取船舶高清图像，并采用深度学习方法对船舶上文字进行定位和识别，得到文字识别结果，包括位置、置信度Conf和识别内容信息Txt，对文字识别结果进行进一步判断，判断逻辑如下：
[0014][0015]其中，(x
min
,y
min
)是文字识别结果左上角像素点坐标，(x
max
,y
max
)是文字识别结果右下角像素点坐标，n是Txt中的字符个数，若满足上述判断逻辑，即能得到最终船名识别结果。
[0016]优选的，所述步骤四中，将船舶在图像中的位置坐标通过相机成像原理变换成世界坐标系中的船舶位置坐标{x
p
,y
p
}，该位置坐标{x
p
,y
p
}与步骤三解析得到的AIS船舶位置{x
w
,y
w
}进行匹配，如果满足以下匹配条件：
[0017][0018]则认为匹配上。
[0019]与现有技术相比，本专利技术的有益效果是：本专利技术结合AIS和视频图像识别技术的优点，可以在船舶没有开启AIS的情况下获取船舶身份，提升了船舶身份识别的准确率，为水上执法监管提供了基础，其次在AIS船名与图像识别船名相互校验比对时，提升了船舶身份的可靠性，既解决了未开AIS船舶身份无法识别的问题，还可以对船名不规范的船舶用AIS作为身份补充，提升船舶身份识别准确率，具备一定的使用前景。
附图说明
[0020]图1为本专利技术多元融合的船舶身份识别方法的算法流程图。
具体实施方式
[0021]为使本专利技术实现的技术手段、创作特征、达成目的与功效易于明白了解，下面结合具体实施方式，进一步阐述本专利技术。
[0022]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0023]实施例
[0024]请参阅图1，本专利技术提供一种多元融合的船舶身份识别方法，包括以下步骤：
[0025]步骤一，基于视频采用背景建模方法检测船舶在图像中的位置坐标；
[0026]步骤二，根据船舶在图像中的位置坐标获取船舶高清图像，并采用深度学习方法对船名区域进行定位和识别，得到图像识别船名；
[0027]步骤三，利用AIS接收终端获取船舶AIS信息，并对船舶AIS信息进行解析，得到解析信息，包括：AIS船名和AIS船舶位置；
[0028]步骤四，将船舶在图像中的位置坐标通过相机成像原理变换成世界坐标系下的船舶位置坐标，将世界坐标系下的船舶位置坐标与步骤三解析得到的AIS船舶位置进行匹配，如果满足匹配条件，则认为匹配上，进入步骤五，否则以步骤二得到的图像识别船名作为最终的船舶身份；
[0029]步骤五，当船舶既有AIS船名又有图像识别船名时，判断两者是否相等，若相等，则以图像识别船名作为最终的船舶身份，若不相等，则判断图像识别船名的置信度是否大于第二预设阈值，如果是，则以图像识别船名作为最终的船舶身份，反之，以AIS船名作为最终的船舶身份。
[0030]步骤一中，基于视频采用背景建模方法检测画面中变化的前景连通域集合{S
i
|i＝1、2、3
…
n}，根连通域的面积n、连通域外接矩形宽高比r、矩形度q、宽度w
m
、高度h
m
...

【技术保护点】

【技术特征摘要】
1.一种多元融合的船舶身份识别方法，其特征在于：所述船舶身份识别方法包括以下步骤：步骤一，基于视频采用背景建模方法检测船舶在图像中的位置坐标；步骤二，根据船舶在图像中的位置坐标获取船舶高清图像，并采用深度学习方法对船名区域进行定位和识别，得到图像识别船名；步骤三，利用AIS接收终端获取船舶AIS信息，并对船舶AIS信息进行解析，得到解析信息，包括：AIS船名和AIS船舶位置；步骤四，将船舶在图像中的位置坐标通过相机成像原理变换成世界坐标系下的船舶位置坐标，将世界坐标系下的船舶位置坐标与步骤三解析得到的AIS船舶位置进行匹配，如果满足匹配条件，则认为匹配上，进入步骤五，否则以步骤二得到的图像识别船名作为最终的船舶身份；步骤五，当船舶既有AIS船名又有图像识别船名时，判断两者是否相等，若相等，则以图像识别船名作为最终的船舶身份，若不相等，则判断图像识别船名的置信度是否大于第二预设阈值，如果是，则以图像识别船名作为最终的船舶身份，反之，以AIS船名作为最终的船舶身份。2.根据权利要求1所述的一种多元融合的船舶身份识别方法，其特征在于：所述步骤二中，采用预先训练好的yolo v5检测模型对船名区域进行定位和识别，其中yolo v5检测模型的训练过程如下：采集包括白天、夜晚、雨天和雾天不同场景下包含船名的图像作为数据集，并对数据集中的船名位置进行人工标定；对于人工标定后的数据集采用马赛克增强机制进行丰富，即任选4张图像作为一个组合进行随机裁剪和缩放后，再随机...

【专利技术属性】
技术研发人员：杨正，林盛梅，欧阳文全，程思钦，李志杰，
申请(专利权)人：南京畅淼科技有限责任公司，
类型：发明
国别省市：