一种口罩佩戴规范度的检测方法及装置制造方法及图纸

本发明专利技术公开了一种口罩佩戴规范度的检测方法及装置，该方法包括：接收待检测的图像；待检测的图像包括待检测的对象；基于训练后的多任务网络模型对待检测的图像进行检测处理，获得对象佩戴口罩的区域；并对对象佩戴口罩的区域的面积与预设阈值进行比对，确定第一检测结果；当确定对象佩戴口罩时，则确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定比对信息在待检测图像中对应的目标区域；比对信息用于表征进行口罩佩戴规范检测时所检测的比对部位的信息；人脸特征点模板基于对象的人脸区域所确定；基于目标区域和对象佩戴口罩的区域重叠程度，获得第二检测结果；第二检测结果包括佩戴不规范以及佩戴规范。结果包括佩戴不规范以及佩戴规范。结果包括佩戴不规范以及佩戴规范。

【技术实现步骤摘要】
一种口罩佩戴规范度的检测方法及装置


[0001]本专利技术涉及图像处理
，尤其涉及一种口罩佩戴规范度的检测方法及装置。

技术介绍

[0002]目前，佩戴口罩是一项非常显著的预防疾病传染的措施，例如通过佩戴口罩可以有效的帮助相关组织进行疫情防控管理以降低传播风险。因此，检测人们是否佩戴口罩及是否规范佩戴口罩成为了一项重要的工作。
[0003]目前现有技术中进行佩戴口罩检测时，一般是先检测出人脸，然后基于图像分类技术判断目标人员是否戴口罩。然而，现有系统涉及检测、分类等多个环节级联，整体系统的耗时较高，且不能适应不同的佩戴规范检测需求。

技术实现思路

[0004]本专利技术实施例提供一种口罩佩戴规范度的检测方法及装置，用于提高口罩佩戴规范度的检测准确性。
[0005]第一方面，提供一种口罩佩戴规范度的检测方法，所述方法包括：
[0006]接收待检测的图像；所述待检测的图像包括待检测的对象；
[0007]基于训练后的多任务网络模型对所述待检测的图像进行检测处理，获得所述对象佩戴口罩的区域；并对所述对象佩戴口罩的区域的面积与预设阈值进行比对，确定第一检测结果；所述第一检测结果为所述对象佩戴口罩或所述对象未佩戴口罩；
[0008]当确定所述对象佩戴口罩时，则确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定所述比对信息在所述待检测图像中对应的目标区域；其中，所述比对信息用于表征进行口罩佩戴规范检测时所检测的比对部位的信息；所述人脸特征点模板基于所述对象的人脸区域所确定；
[0009]基于所述目标区域和所述对象佩戴口罩的区域重叠程度，获得第二检测结果；其中，所述第二检测结果包括佩戴不规范以及佩戴规范。
[0010]在一种可能的实施方式中，确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定所述比对信息在所述待检测图像中对应的目标区域，包括：
[0011]接收输入的自定义比对标准，并基于所述自定义比对标准生成所述待比对口罩面积的比对信息；
[0012]确定所述比对信息对应的第一特征点信息，从所述人脸特征点模板中，筛选与所述第一特征点信息相同的特征点，并基于所述特征点组成所述待检测图像中对应的目标区域。
[0013]在一种可能的实施方式中，基于所述目标区域和所述对象佩戴口罩的区域重叠程度，获得第二检测结果，包括：
[0014]确定所述目标区域和所述对象佩戴口罩的区域的重叠区域，并确定所述重叠区域
占所述目标区域的重叠比例；
[0015]当确定所述重叠比例不小于预设阈值时，则确定第二检测结果为佩戴规范；
[0016]当确定所述重叠比例小于所述预设阈值时，则确定第二检测结果为佩戴不规范。
[0017]在一种可能的实施方式中，所述训练后的多任务管理模型基于以下方式训练：
[0018]确定待训练的样本图像；所述样本图像对应包括标注人脸检测框、标注人脸特征点、标注对象佩戴口罩的区域或标注对象是否佩戴口罩的信息；
[0019]基于预设多任务管理模型对所述样本图像进行检测，获得预测人脸检测框，并将所述预测人脸检测框和所述标注人脸检测框进行比对，获得第一损失值；所述第一损失值用于表征所述预测人脸检测框与所述标注人脸检测框之间的偏差；
[0020]基于所述预设多任务管理模型对所述样本图像进行检测，获得预测检测信息，并将所述预测检测信息与所述标注对象是否佩戴口罩的信息进行比较，获得第二损失值；所述第二损失值用于表征所述预测检测信息与所述标注对象是否佩戴口罩的信息之间的偏差；
[0021]基于所述预测多任务管理模型对所述样本图像进行检测，获得预测人脸特征点信息，并将所述预测人脸特征点与所述标注人脸特征点进行比对，获得第三损失值；所述第三损失值用于表征所述预测人脸特征点与所述标注人脸特征点之间的偏差；
[0022]基于所述预设多任务管理模型对所述样本图像进行检测，获得预测佩戴口罩的区域，并将所述预测佩戴口罩的区域与标注对象佩戴口罩的区域进行比较，获得第四损失值；所述第四损失值用于表征所述预测佩戴口罩的区域与所述标注对象佩戴口罩的区域之间的偏差；
[0023]基于所述第一损失值、所述第二损失值、所述第三损失值以及第四损失值和各自对应的权重，确定整体损失值，并基于所述整体损失值对所述预设多任务管理模型进行调整，获得调整后的多任务管理模型；
[0024]当确定所述调整后的多任务管理模型所确定的整体损失值处于预设范围时，将所述调整后的多任务管理模型作为所述训练后的多任务管理模型。
[0025]第二方面，提供一种口罩佩戴规范度的检测装置，所述装置包括：
[0026]接收单元，用于接收待检测的图像；所述待检测的图像包括待检测的对象；
[0027]第一处理单元，用于基于训练后的多任务网络模型对所述待检测的图像进行检测处理，获得所述对象佩戴口罩的区域；并对所述对象佩戴口罩的区域的面积与预设阈值进行比对，确定第一检测结果；所述第一检测结果为所述对象佩戴口罩或所述对象未佩戴口罩；
[0028]第二处理单元，用于当确定所述对象佩戴口罩时，则确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定所述比对信息在所述待检测图像中对应的目标区域；其中，所述比对信息用于表征进行口罩佩戴规范检测时所检测的比对部位的信息；所述人脸特征点模板基于所述对象的人脸区域所确定；
[0029]获得单元，用于基于所述目标区域和所述对象佩戴口罩的区域重叠程度，获得第二检测结果；其中，所述第二检测结果包括佩戴不规范以及佩戴规范。
[0030]在一种可能的实施方式中，所述第二处理单元，具体用于：
[0031]接收输入的自定义比对标准，并基于所述自定义比对标准生成所述待比对口罩面
积的比对信息；
[0032]确定所述比对信息对应的第一特征点信息，从所述人脸特征点模板中，筛选与所述第一特征点信息相同的特征点，并基于所述特征点组成所述待检测图像中对应的目标区域。
[0033]在一种可能的实施方式中，所述获得单元，具体用于：
[0034]确定所述目标区域和所述对象佩戴口罩的区域的重叠区域，并确定所述重叠区域占所述目标区域的重叠比例；
[0035]当确定所述重叠比例不小于预设阈值时，则确定第二检测结果为佩戴规范；
[0036]当确定所述重叠比例小于所述预设阈值时，则确定第二检测结果为佩戴不规范。
[0037]在一种可能的实施方式中，所述装置还包括训练单元，用于：
[0038]确定待训练的样本图像；所述样本图像对应包括标注人脸检测框、标注人脸特征点、标注对象佩戴口罩的区域或标注对象是否佩戴口罩的信息；
[0039]基于预设多任务管理模型对所述样本图像进行检测，获得预测人脸检测框，并将所述预测人脸检测框和所述标注人脸检测框进行比对，获得第一损失值；所述第一损失值用于表征所述预测人脸检测框与所述标注人脸检测框之间的偏差；
[本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种口罩佩戴规范度的检测方法，其特征在于，所述方法包括：接收待检测的图像；所述待检测的图像包括待检测的对象；基于训练后的多任务网络模型对所述待检测的图像进行检测处理，获得所述对象佩戴口罩的区域；并对所述对象佩戴口罩的区域的面积与预设阈值进行比对，确定第一检测结果；所述第一检测结果为所述对象佩戴口罩或所述对象未佩戴口罩；当确定所述对象佩戴口罩时，则确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定所述比对信息在所述待检测图像中对应的目标区域；其中，所述比对信息用于表征进行口罩佩戴规范检测时所检测的比对部位的信息；所述人脸特征点模板基于所述对象的人脸区域所确定；基于所述目标区域和所述对象佩戴口罩的区域重叠程度，获得第二检测结果；其中，所述第二检测结果包括佩戴不规范以及佩戴规范。2.如权利要求1所述的方法，其特征在于，确定待比对口罩面积的比对信息，并基于人脸特征点模板，确定所述比对信息在所述待检测图像中对应的目标区域，包括：接收输入的自定义比对标准，并基于所述自定义比对标准生成所述待比对口罩面积的比对信息；确定所述比对信息对应的第一特征点信息，从所述人脸特征点模板中，筛选与所述第一特征点信息相同的特征点，并基于所述特征点组成所述待检测图像中对应的目标区域。3.如权利要求1或2所述的方法，其特征在于，基于所述目标区域和所述对象佩戴口罩的区域重叠程度，获得第二检测结果，包括：确定所述目标区域和所述对象佩戴口罩的区域的重叠区域，并确定所述重叠区域占所述目标区域的重叠比例；当确定所述重叠比例不小于预设阈值时，则确定第二检测结果为佩戴规范；当确定所述重叠比例小于所述预设阈值时，则确定第二检测结果为佩戴不规范。4.如权利要求1所述的方法，其特征在于，所述训练后的多任务管理模型基于以下方式训练：确定待训练的样本图像；所述样本图像对应包括标注人脸检测框、标注人脸特征点、标注对象佩戴口罩的区域或标注对象是否佩戴口罩的信息；基于预设多任务管理模型对所述样本图像进行检测，获得预测人脸检测框，并将所述预测人脸检测框和所述标注人脸检测框进行比对，获得第一损失值；所述第一损失值用于表征所述预测人脸检测框与所述标注人脸检测框之间的偏差；基于所述预设多任务管理模型对所述样本图像进行检测，获得预测检测信息，并将所述预测检测信息与所述标注对象是否佩戴口罩的信息进行比较，获得第二损失值；所述第二损失值用于表征所述预测检测信息与所述标注对象是否佩戴口罩的信息之间的偏差；基于所述预测多任务管理模型对所述样本图像进行检测，获得预测人脸特征点信息，并将所述预测人脸特征点与所述标注人脸特征点进行比对，获得第三损失值；所述第三损失值用于表征所述预测人脸特征点与所述标注人脸特征点之间的偏差；基于所述预设多任务管理模型对所述样本图像进行检测，获得预测佩戴口罩的区域，并将所述预测佩戴口罩的区域与标注对象佩戴口罩的区域进行比较，获得第四损失值；所述第四损失值用于表征所述预测佩戴口罩的区域与所述标注对象佩戴口罩的区域之间的
偏差；基于所述第一损失值、所述第二损失值、所述第三损失值以及第四损失值和各自对应的权重，确定整体损失值，并基于所述整体损失值对所述预设多任务管理模型进行调整，获得调整后的多任务管理模型；当确定所述调整后的多任务管理模型所确定的整体损失值处于预设范围时，将所述调整后的多任务管理模型作为所述训练后的多任务管理模型。5.一种口罩佩戴规范度的检测装置，其特征在于，所述装置包括：接收单元，用于接收待检测的图像；所述待检测的图像包括待检测的对象；第一处理单元，用于基于训练后的多任务...

【专利技术属性】
技术研发人员：张兴明，郝敬松，朱树磊，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：