一种船舶海上运行用监控方法及监控系统技术方案

本发明专利技术公开了一种船舶海上运行用监控方法，包括下列步骤，第一步，进行船内部人员图像采集、海上环境图像采集、海上风速采集；同时对船的底部离水底面的距离进行采集；第二步，对第一步中船内部采集的图像进行分析处理，判断是否有乘客偏移异常行为或者驾驶员异常行为，同时根据风速和船外部图像进行图像处理，分析出海浪强度等级；第三步，根据海浪强度等级、船的底部离水底面的距离、乘客偏移异常行为和驾驶员异常行为，来判断船体面临的相应危险，发出相应信号并报警；并综合判断是否需要对船体进行检查。监测过程简单，可移植性好，而且能够判断是否需要对船体进行检查，对航海的船体具有很好的管理措施。

A monitoring method and monitoring system for ship operation at sea

The invention discloses a monitoring method for ship operation at sea, which comprises the following steps: firstly, collecting the ship interior personnel image, collecting the sea environment image, collecting the sea wind speed; at the same time, collecting the distance from the bottom of the ship to the bottom of the water; secondly, analyzing the images collected inside the ship in the first step Processing, judging whether there is passenger deviation abnormal behavior or driver abnormal behavior, at the same time according to the wind speed and ship image processing, analysis of the wave intensity level; third, according to the wave intensity level, the bottom of the ship from the bottom of the distance, passenger deviation abnormal behavior and driver abnormal behavior, to judge. The corresponding danger faced by the broken hull will send out the corresponding signal and alarm, and judge whether the hull needs to be inspected comprehensively. Monitoring process is simple, good portability, and can determine whether the need for inspection of the ship, the ship has a good management measures.

【技术实现步骤摘要】
一种船舶海上运行用监控方法及监控系统
本专利技术涉及船舶安全
，具体为一种船舶海上运行用监控方法及监控系统。
技术介绍
船舶(boatsandships)，各种船只的总称。船舶是能航行或停泊于水域进行运输或作业的交通工具，按不同的使用要求而具有不同的技术性能、装备和结构型式。船舶是一种主要在地理水中运行的人造交通工具。另外，民用船一般称为船，军用船称为舰，小型船称为艇或舟，其总称为舰船或船艇。内部主要包括容纳空间、支撑结构和排水结构，具有利用外在或自带能源的推进系统。外型一般是利于克服流体阻力的流线性包络，材料随着科技进步不断更新，早期为木、竹、麻等自然材料，近代多是钢材以及铝、玻璃纤维、亚克力和各种复合材料。船舶在海上运行的过程当中，会遇到很多的情况，比如海浪过大，船体倾斜，驾驶员疲劳等，现在出现了很多对海浪监测和船体倾斜的监测设备，能够监测船体是否倾斜或者海浪是否超过预警值，不过在船体监测的手段中，监测过程复杂，而且可移植性差；难判断是否需要对船体进行检查，让船体人员疏于对船体管理，造成难以挽回的损失。
技术实现思路
针对以上问题，本专利技术提供了一种船舶海上运行用监控方法及监控系统，监测过程简单，可移植性好，而且能够判断是否需要对船体进行检查，对航海的船体具有很好的管理措施，可以有效解决
技术介绍
中的问题。为实现上述目的，本专利技术提供如下技术方案：一种船舶海上运行用监控方法，包括下列步骤：第一步，进行船内部人员图像采集、海上环境图像采集、海上风速采集；同时对船的底部离水底面的距离进行采集；第二步，对第一步中船内部采集的图像进行分析处理，判断是否有乘客偏移异常行为或者驾驶员异常行为，同时根据风速和船外部图像进行图像处理，分析出海浪强度等级；第三步，根据海浪强度等级、船的底部离水底面的距离、乘客偏移异常行为和驾驶员异常行为，来判断船体面临的相应危险，发出相应信号并报警；并综合判断是否需要对船体进行检查；运行过程中实时将乘客偏移异常行为、驾驶员异常行为、海浪强度等级和船的底部离水底面的距离信息传输到驾驶室和船舶信息管理中心。作为本专利技术一种优选的技术方案，船内部图像采集包括对船内的驾驶员面部状态、船内的驾驶员运动状态和乘客的运动状态进行图像采集，船外部海上环境图像采集包括对海面海浪进行拍摄。作为本专利技术一种优选的技术方案，第二步中对船内部乘客运动状态的分析算法采用光流法对特征点的检测和追踪，根据相邻帧图像中特征点个数来确定人员数，同时设定时间阈值、偏移阈值、速度阈值，根据多个连续相邻帧之间的特征点运动状态和运动时间对船内乘客运动状态进行分析，当出现连续相邻帧之间超过一定比例特征点的运动位置连续向一边的偏移量大于设定偏移量，该偏移量的运行时间小于设定时间阈值，同时偏移速度超过设定速度阈值，则判断人员出现乘客偏移异常运动；利用高斯混合模型获取当前处理帧的背景；将当前处理帧减去所述背景获得前景图像，对这些前景图像进行二值化，并利用数学形态方法对前景图像进行去噪声处理；利用膨胀和腐蚀对图像进行处理，每个相邻帧的特征点之间相隔距离除以相邻帧的图像时间即为该特征点的运动速度，图像中超过一半以上的特征点出现的运动速度均超过设定的速度阈值，且超过一半以上的特征点运动的方向持续向一边运动距离超过设定的偏移量，同时超过一半以上的特征点在该偏移量内的时间小于设定的时间阈值，则判断出现偏移异常行为，乘客偏移异常行为和驾驶员偏移异常行为判断标准均以此为基准。驾驶员异常行为包括驾驶员疲劳行为、驾驶员偏移异常行为，利用摄像头对驾驶员面部图像采集，对摄像头拍摄的驾驶员面部图像进行分析以确定驾驶员的疲劳状态，所述驾驶员的疲劳状态包括极度疲劳、疲劳、亚清醒、清醒、极度清醒五个状态；驾驶员偏移异常行为的监测方法与上述乘客偏移异常行为的监测过程一致；根据船外部的图像采集到的水面区域视频图像，经过直方图均衡化，对直方图均衡化处理的图像实现傅立叶变换，并计算矩形环内的功率谱能量比，采用分段线性回归的方法，提取矩形环内功率谱能量比曲线的两条特征直线斜率和截距，根据两条特征直线斜率和截距的关系，确定浪级的参数一，在专利申请号为《201210219113.1》的专利一种基于水面波浪图像的浪级监测方法当中公布了该方法，此处不做赘述；同时对风速进行测量，确定参数二，将参数一与参数二进行相加后取平均值，确定海浪等级。作为本专利技术一种优选的技术方案，第三步中，当海浪等级超过预设等级阈值，出现驾驶员偏移异常行为或者乘客偏移异常行为时，发出海浪危险信号，并发出海浪危险警报；当出现船的底部离水底面的距离小于预设距离阈值，出现驾驶员偏移异常行为或者乘客偏移异常行为时，发出触礁危险信号，并发出触礁危险警报；当出现驾驶员疲劳行为时，发出驾驶员疲劳危险信号，并发出驾驶员疲劳危险警报；若出现驾驶员偏移异常行为或者乘客偏移异常行为且海浪等级和底部离水底面的距离均正常，判定需要对船体进行检查，并发出船体需要检查警报。当海浪等级超过预设等级阈值，发出海浪警戒信号，并发出海浪警戒警报；当出现船的底部离水底面的距离小于预设距离阈值，发出触礁警戒信号，并发出触礁警戒警报。作为本专利技术一种优选的技术方案，在船内部人员和海上环境进行图像的采集过程中，保持图像采集始终位于平稳状态且对采集的位置可以进行调整。本专利技术提供了一种船舶海上运行用监控系统：包括用于采集船内乘客图像信息和船内驾驶员图像信息的船舱内图像采集模块；用于采集海上水面波浪的海浪图像采集模块；用于对所述船舱内图像采集模块和海浪图像采集模块进行图像处理分析的图像处理模块；对船舱内图像采集模块的图像进行分析判断是否出现乘客偏移异常行为和驾驶员异常行为；用于对所述图像处理模块内处理的船舱外图像进行海浪强度信息提取的海浪强度拟合模块；用于测量风速的风速测量模块；用于测量船的底部离水底面的距离的换能器组件模块；用于从图像处理模块、风速测量模块、换能器组件模块、海浪强度拟合模块中获取信息并处理的中央处理器，所述中央处理器根据海浪强度拟合模块和风速测量模块判断海浪强度等级，再由海浪强度等级信号、乘客偏移异常行为和驾驶员异常行为、船的底部离水底面的距离信息来判定船体出现的相应危险信号并判定是否对船体进行检查；所述中央处理器连接有无线通信模块、报警模块、语音播报模块。作为本专利技术一种优选的技术方案，船舱内图像采集模块包括对船内的驾驶员面部状态、船内的驾驶员运动状态和乘客的运动状态进行图像采集，海浪图像采集模块包括对海面海浪进行拍摄。作为本专利技术一种优选的技术方案，图像处理模块对船舱内图像采集模块的处理方式为采用光流法对图像中特征点的检测和追踪，根据相邻帧图像中特征点个数来确定人员数，同时设定时间阈值、偏移阈值、速度阈值，根据多个连续相邻帧之间的特征点运动状态和运动时间对船内乘客运动状态进行分析，当出现连续相邻帧之间超过一定比例特征点的运动位置连续向一边的偏移量大于设定偏移量，该偏移量的运行时间小于设定时间阈值，同时偏移速度超过设定速度阈值，则判断人员出现偏移异常运动；图像处理模块对船舱内图像采集模块采集到的驾驶员图像进行处理分析的过程包括驾驶员疲劳行为、驾驶员偏移异常行为，利用摄像头对驾驶员面部图像采集，对摄像头拍摄的驾驶员面部图像进行分析以确定驾驶员的疲本文档来自技高网...

【技术保护点】
1.一种船舶海上运行用监控方法，其特征在于，包括下列步骤：第一步，进行船内部人员图像采集、海上环境图像采集、海上风速采集；同时对船的底部离水底面的距离进行采集；第二步，对第一步中船内部采集的图像进行分析处理，判断是否有乘客偏移异常行为或者驾驶员异常行为，同时根据风速和船外部图像进行图像处理，分析出海浪强度等级；第三步，根据海浪强度等级、船的底部离水底面的距离、乘客偏移异常行为和驾驶员异常行为，来判断船体面临的相应危险，发出相应信号并报警；并综合判断是否需要对船体进行检查；运行过程中实时将乘客偏移异常行为、驾驶员异常行为、海浪强度等级和船的底部离水底面的距离信息传输到驾驶室和船舶信息管理中心。

【技术特征摘要】
1.一种船舶海上运行用监控方法，其特征在于，包括下列步骤：第一步，进行船内部人员图像采集、海上环境图像采集、海上风速采集；同时对船的底部离水底面的距离进行采集；第二步，对第一步中船内部采集的图像进行分析处理，判断是否有乘客偏移异常行为或者驾驶员异常行为，同时根据风速和船外部图像进行图像处理，分析出海浪强度等级；第三步，根据海浪强度等级、船的底部离水底面的距离、乘客偏移异常行为和驾驶员异常行为，来判断船体面临的相应危险，发出相应信号并报警；并综合判断是否需要对船体进行检查；运行过程中实时将乘客偏移异常行为、驾驶员异常行为、海浪强度等级和船的底部离水底面的距离信息传输到驾驶室和船舶信息管理中心。2.根据权利要求1所述的一种船舶海上运行用监控方法，其特征在于：船内部图像采集包括对船内的驾驶员面部状态、船内的驾驶员运动状态和乘客的运动状态进行图像采集，船外部海上环境图像采集包括对海面海浪进行拍摄。3.根据权利要求1或2所述的一种船舶海上运行用监控方法，其特征在于：第二步中对船内部乘客运动状态的分析算法采用光流法对特征点的检测和追踪，根据相邻帧图像中特征点个数来确定人员数，同时设定时间阈值、偏移阈值、速度阈值，根据多个连续相邻帧之间的特征点运动状态和运动时间对船内乘客运动状态进行分析，当出现连续相邻帧之间超过一定比例特征点的运动位置连续向一边的偏移量大于设定偏移量，该偏移量的运行时间小于设定时间阈值，同时偏移速度超过设定速度阈值，则判断人员出现乘客偏移异常运动；驾驶员异常行为包括驾驶员疲劳行为、驾驶员偏移异常行为，利用摄像头对驾驶员面部图像采集，对摄像头拍摄的驾驶员面部图像进行分析以确定驾驶员的疲劳状态，所述驾驶员的疲劳状态包括极度疲劳、疲劳、亚清醒、清醒、极度清醒五个状态；驾驶员偏移异常行为与乘客偏移异常行为监测方式一致；根据船外部的摄像头采集到的水面区域视频图像，经过直方图均衡化，对直方图均衡化处理的图像实现傅立叶变换，并计算矩形环内的功率谱能量比，采用分段线性回归的方法，提取矩形环内功率谱能量比曲线的两条特征直线斜率和截距，根据两条特征直线斜率和截距的关系，确定浪级的参数一，同时对风速进行测量，确定参数二，将参数一与参数二进行相加后取平均值，确定海浪等级。4.根据权利要求3所述的一种船舶海上运行用监控方法，其特征在于：第三步中，当海浪等级超过预设等级阈值，出现驾驶员偏移异常行为或者乘客偏移异常行为时，发出海浪危险信号，并发出海浪危险警报；当出现船的底部离水底面的距离小于预设距离阈值，出现驾驶员偏移异常行为或者乘客偏移异常行为时，发出触礁危险信号，并发出触礁危险警报；当出现驾驶员疲劳行为时，发出驾驶员疲劳危险信号，并发出驾驶员疲劳危险或者驾驶员缺勤危险警报；若出现驾驶员偏移异常行为或者乘客偏移异常行为且海浪等级和底部离水底面的距离均正常，判定需要对船体进行检查，并发出船体需要检查警报；并对船体进行地理位置实时定位；上述危险警报各不干扰，循环播报。5.根据权利要求3述的一种船舶海上运行用监控方法，其特征在于：在船内部人员和海上环境进行图像的采集过程中，保持图像采集始终位于平稳状态且对采集的位置可以进行调整。6.一种船舶海上运行用监控系统，其特征在于：包括用于采集船内乘客图像信息和船内驾驶员图像信息的船舱内图像采集模块；用于采集海上水面波浪的海浪图像采集模块；用于对所述船舱内图像采集模块和海浪图像采集模块进行图像处理分析的图像处理模块，对船舱内图像采集模块的图像进行分析判断是否出现乘客偏移异常行为和驾驶员异常行为；用于对所述图像处理模块内处理的船舱外图像进行海浪强度信息提取的海浪强度拟合模块；用于测量风速的风速测量模块；用于测量...

【专利技术属性】
技术研发人员：张文刚，
申请(专利权)人：汝州华超新能源科技有限公司，
类型：发明
国别省市：河南,41