一种睡岗检测方法、装置、系统及存储介质制造方法及图纸

本发明专利技术涉及一种睡岗检测方法、装置、系统及存储介质。检测方法包括：提取视频数据中第一预设时长内的连续帧图像；针对每个帧图像，计算帧图像与其他帧图像的相似度；获取相似度大于预设相似度阈值的帧图像的数量在所有帧图像的数量中的占比值，并在占比值大于预设阈值时，通过预先训练的睡岗检测模型检测帧图像，得到被检测人员的睡岗检测结果。本方案根据对视频数据中的图像是否相似确定被检测人员是否可能处于睡岗状态，并在确定被检测人员可能处于睡岗状态时，再进行进一步检测，实现了对于被检测人员的监控，不仅可以降低数据处理量，还可以保证对于睡岗检测的准确率。

【技术实现步骤摘要】
一种睡岗检测方法、装置、系统及存储介质
本专利技术涉及智能监控
，尤其涉及一种睡岗检测方法、装置、系统及存储介质。
技术介绍
工厂，又称制造厂，是一类用以生产货物的大型工业建筑物。大部分工厂都拥有以大型机器或设备构成的生产线。在世界近代史中泛指资本主义机器大生产，即使用机械化劳动代替手工劳动的资本主义工业场所。18～19世纪，经过工业革命，机器在生产中广泛应用，为资本主义生产方式奠定了坚实的物质技术基础。我国是制造业大国，针对工业生产场景，流水线或者重要岗位的睡岗监控一直是企业保证安全生产的重要工作。但是传统生产过程中，无法实时监控到生产过程的细节，只能通过人工进行监督，无法做到及时全面的监控。
技术实现思路
为了解决现有技术存在的问题，本专利技术的至少一个实施例提供了一种睡岗检测方法、装置、系统及存储介质。第一方面，本专利技术实施例提供了一种睡岗检测方法，所述检测方法包括：获取包括被检测人员的视频数据；提取所述视频数据中任一时刻起第一预设时长内的连续帧图像；针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度；获取相似度大于预设相似度阈值的帧图像的数量在所有所述帧图像的数量中的占比值；当所述占比值大于预设阈值时，通过预先训练的睡岗检测模型检测所述帧图像，得到所述被检测人员的睡岗检测结果。基于上述技术方案，本专利技术实施例还可以做出如下改进。结合第一方面，在第一方面的第一种实施例中，所述提取所述视频数据中任一时刻起第一预设时长内的连续帧图像之前，所述检测方法还包括：根据拍摄所述视频数据的摄像装置的安装位置判断是否可以拍摄到被检测人员的人脸图像；若不可以拍摄到所述被检测人员的人脸图像，则执行所述提取所述视频数据中任一时刻起第一预设时长内的连续帧图像的步骤；若可以拍摄到所述被检测人员的人脸图像，则根据所述视频数据中是否存在所述被检测人员的人脸图像判断所述被检测人员是否睡岗。结合第一方面的第一种实施例，在第一方面的第二种实施例中，所述根据所述视频数据中是否存在所述被检测人员的人脸图像判断所述被检测人员是否睡岗，包括：从所述视频数据中获取所述被检测人员的人脸位置的图像，作为被检测图像；判断所述视频数据中是否存在第二预设时长的连续帧所述被检测图像中没有人脸图像；若存在第二预设时长的连续帧所述被检测图像中没有人脸图像，则所述被检测人员睡岗；若不存在第二预设时长的连续帧所述被检测图像中没有人脸图像，则获取所述被检测图像中的人脸图像，根据所述人脸图像中的眼睛是否闭合判断所述被检测人员是否睡岗。结合第一方面的第二种实施例，在第一方面的第三种实施例中，所述根据所述人脸图像中的眼睛是否闭合判断所述被检测人员是否睡岗，包括：获取所述人脸图像中眼睛的闭合程度；判断所述眼睛的闭合程度大于预设闭合程度的时长是否大于或等于第三预设时长；若所述眼睛的闭合程度大于预设闭合程度的时长大于或等于第三预设时长，则所述被检测人员睡岗；若所述眼睛的闭合程度大于预设闭合程度的时长小于第三预设时长，则所述被检测人员未睡岗。结合第一方面，在第一方面的第四种实施例中，所述针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度，包括：针对每个所述帧图像，计算所述帧图像和与所述帧图像相邻的帧图像的相似度。结合第一方面的第四种实施例，在第一方面的第五种实施例中，所述计算所述帧图像和与所述帧图像相邻的帧图像的相似度，包括：将相邻的两张帧图像转换为灰度图，并缩小至预设比例，得到两张缩略图；分别获取两张缩略图中像素点的像素灰度，并将像素灰度存储进数组中，分别得到对应缩略图的像素灰度数组；计算两个像素灰度数组的汉明距离，根据所述汉明距离得到相邻像张帧图像的相似度。结合第一方面或第一方面的第一、第二、第三、第四或第五种实施例，在第一方面的第六种实施例中，所述睡岗检测模型的训练方法包括：获取已知睡岗结果的样本图片；其中所述已知睡岗结果包括：睡岗和非睡岗；将所述样本图片依次输入预先构建的睡岗检测模型中；获取所述睡岗检测模型输出的每张所述样本图片的睡岗预测结果；获取所述样本图片的睡岗预测结果与睡岗结果相匹配的累计匹配次数；如果所述累计匹配次数在所有所述样本图片的数量中的占比值达到预设占比值，则所述睡岗检测模型收敛，完成对所述睡岗检测模型的训练；如果所述累计匹配次数在所有所述样本图片的数量中的占比值达到预设占比值，则调整所述睡岗检测模型中的参数，直至所述睡岗检测模型收敛或所述睡岗检测模型中的参数的调整次数达到预设次数。第二方面，本专利技术实施例提供了一种睡岗检测装置，所述检测系统包括：第一获取单元，用于获取包括被检测人员的视频数据；第二获取单元，用于提取所述视频数据中任一时刻起第一预设时长内的连续帧图像；第一处理单元，用于针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度；第二处理单元，用于获取相似度大于预设相似度阈值的帧图像的数量在所有所述帧图像的数量中的占比值；当所述占比值大于预设阈值时，通过预先训练的睡岗检测模型检测所述帧图像，得到所述被检测人员的睡岗检测结果。第三方面，本专利技术实施例提供了一种睡岗检测系统，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现第一方面中任一所述的睡岗检测方法。第四方面，本专利技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现第一方面中任一所述的睡岗检测方法。本专利技术的上述技术方案与现有技术相比具有如下优点：本专利技术实施例通过获取被检测人员的视频数据，获取视频数据中的连续帧图像，计算帧图像之间的相似度，并获取相似度大于预设相似度阈值的帧图像的数量在所有帧图像的数量中的占比值，并在占比值大于预设阈值时，对帧图像进行进一步检测，确定被检测人员是否睡岗，本方案根据对视频数据中的图像是否相似确定被检测人员是否可能处于睡岗状态，并在确定被检测人员可能处于睡岗状态时，再进行进一步检测，实现了对于被检测人员的监控，不仅可以降低数据处理量，还可以保证对于睡岗检测的准确率。附图说明图1是本专利技术实施例提供的一种睡岗检测方法流程示意图；图2是本专利技术另一实施例提供的一种睡岗检测方法流程示意图；图3是本专利技术又一实施例提供的一种睡岗检测方法流程示意图；图4是本专利技术又一实施例提供的一种睡岗检测方法流程示意图其一；图5是本专利技术又一实施例提供的一种睡岗检测方法流程示意图其二；图6是本专利技术又一实施例提供的一种睡岗检测模型的训练方法流程示意图；图7是本专利技术又一实施例提供的一种睡岗检本文档来自技高网...

【技术保护点】
1.一种睡岗检测方法，其特征在于，所述检测方法包括：/n获取包括被检测人员的视频数据；/n提取所述视频数据中任一时刻起第一预设时长内的连续帧图像；/n针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度；/n获取相似度大于预设相似度阈值的帧图像的数量在所有所述帧图像的数量中的占比值；/n当所述占比值大于预设阈值时，通过预先训练的睡岗检测模型检测所述帧图像，得到所述被检测人员的睡岗检测结果。/n

【技术特征摘要】
1.一种睡岗检测方法，其特征在于，所述检测方法包括：
获取包括被检测人员的视频数据；
提取所述视频数据中任一时刻起第一预设时长内的连续帧图像；
针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度；
获取相似度大于预设相似度阈值的帧图像的数量在所有所述帧图像的数量中的占比值；
当所述占比值大于预设阈值时，通过预先训练的睡岗检测模型检测所述帧图像，得到所述被检测人员的睡岗检测结果。


2.根据权利要求1所述的检测方法，其特征在于，所述提取所述视频数据中任一时刻起第一预设时长内的连续帧图像之前，所述检测方法还包括：
根据拍摄所述视频数据的摄像装置的安装位置判断是否可以拍摄到被检测人员的人脸图像；
若不可以拍摄到所述被检测人员的人脸图像，则执行所述提取所述视频数据中任一时刻起第一预设时长内的连续帧图像的步骤；
若可以拍摄到所述被检测人员的人脸图像，则根据所述视频数据中是否存在所述被检测人员的人脸图像判断所述被检测人员是否睡岗。


3.根据权利要求2所述的检测方法，其特征在于，所述根据所述视频数据中是否存在所述被检测人员的人脸图像判断所述被检测人员是否睡岗，包括：
从所述视频数据中获取所述被检测人员的人脸位置的图像，作为被检测图像；
判断所述视频数据中是否存在第二预设时长的连续帧所述被检测图像中没有人脸图像；
若存在第二预设时长的连续帧所述被检测图像中没有人脸图像，则所述被检测人员睡岗；
若不存在第二预设时长的连续帧所述被检测图像中没有人脸图像，则获取所述被检测图像中的人脸图像，根据所述人脸图像中的眼睛是否闭合判断所述被检测人员是否睡岗。


4.根据权利要求3所述的检测方法，其特征在于，所述根据所述人脸图像中的眼睛是否闭合判断所述被检测人员是否睡岗，包括：
获取所述人脸图像中眼睛的闭合程度；
判断所述眼睛的闭合程度大于预设闭合程度的时长是否大于或等于第三预设时长；
若所述眼睛的闭合程度大于预设闭合程度的时长大于或等于第三预设时长，则所述被检测人员睡岗；
若所述眼睛的闭合程度大于预设闭合程度的时长小于第三预设时长，则所述被检测人员未睡岗。


5.根据权利要求1所述的检测方法，其特征在于，所述针对每个所述帧图像，计算所述帧图像与其他所述帧图像的相似度，包括：
针对每个所述帧图像，计算所述帧图像和与所述帧...

【专利技术属性】
技术研发人员：曹晨宇，
申请(专利权)人：京东数字科技控股有限公司，
类型：发明
国别省市：北京;11