本发明专利技术公开了一种核酸采样监测方法、装置、系统与计算机可读存储介质，该方法包括：在检测到启动指令时，获取被采样人的人脸视频流，并根据所述人脸视频流确定所述被采样人的嘴部是否张开；若确定所述嘴部张开，则基于所述人脸视频流获取所述被采样人的口腔二维图像和口腔深度图像；根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功；本发明专利技术通过获取被采样人的人脸视频流，在被采样人嘴部张开时，获取被采样人的口腔二维图像和口腔深度图像，根据口腔二维图像和口腔深度图像确定咽拭子是否与目标采样部位接触，以确定并提示是否采样成功，避免了采样人员主观判断产生判断误差，提升了核酸采样的效率和准确性。样的效率和准确性。样的效率和准确性。
【技术实现步骤摘要】
核酸采样监测方法、装置、系统与计算机可读存储介质
[0001]本专利技术涉及人工智能
，尤其涉及核酸采样监测方法、装置、系统与计算机可读存储介质。
技术介绍
[0002]采样人员往往需要在一天之内完成数千人的采样任务，这容易使得采样人员的工作负担较重，导致采样人员疲乏后引发误操作的风险，因此，如何提高核酸采样的效率和准确性，是急需解决的问题。
技术实现思路
[0003]本专利技术的主要目的在于提出一种核酸采样监测方法、装置、系统与计算机可读存储介质，旨在解决如何提高核酸采样的效率和准确性的问题。
[0004]为实现上述目的，本专利技术提供一种核酸采样监测方法，所述核酸采样监测方法包括如下步骤：
[0005]在检测到启动指令时，获取被采样人的人脸视频流，并根据所述人脸视频流确定所述被采样人的嘴部是否张开；
[0006]若确定所述嘴部张开，则基于所述人脸视频流获取所述被采样人的口腔二维图像和口腔深度图像；
[0007]根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功。
[0008]可选地，根据所述人脸视频流确定所述被采样人的嘴部是否张开的步骤包括：
[0009]将所述人脸视频流输入预先创建的关键点识别模型，通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合；
[0010]根据所述嘴部关键点集合和所述人脸视频流，确定嘴部关键点坐标集合；
[0011]根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开。
[0012]可选地，根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开的步骤包括：
[0013]根据所述嘴部关键点坐标集合中的嘴角关键点坐标，计算出嘴角间距；
[0014]根据所述嘴部关键点坐标集合中的上唇中心关键点坐标和下唇中心关键点坐标，计算出上下唇间距；
[0015]根据所述嘴角间距和所述上下唇间距计算出嘴部张开系数，并将所述嘴部张开系数与预设嘴部张开阈值进行对比；
[0016]若所述嘴部张开系数大于预设嘴部张开阈值，则确定所述被采样人的嘴部张开；
[0017]若所述嘴部张开系数不大于预设嘴部张开阈值，则确定所述被采样人的嘴部未张开，并将人脸视频流的下一帧图像作为当前帧图像，重复执行步骤：通过所述关键点识别模
型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合。
[0018]可选地，根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功的步骤包括：
[0019]将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合；
[0020]根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标；
[0021]根据所述咽拭子的三维坐标和所述目标采样部位的三维坐标，确定并提示是否采样成功。
[0022]可选地，根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标的步骤包括：
[0023]根据所述预设相机参数、所述口腔深度图像和所述咽拭子的二维坐标集合，计算出所述口腔二维图像中用于表征所述咽拭子的第一像素点集合中的每个像素点对应的三维坐标；
[0024]根据所述第一像素点集合中的每个像素点对应的三维坐标，计算出所述咽拭子的三维坐标；
[0025]根据所述预设相机参数、所述口腔深度图像和所述目标采样部位的二维坐标集合，计算出所述口腔二维图像中用于表征所述目标采样部位的第二像素点集合中的每个像素点对应的三维坐标；
[0026]根据所述第二像素点集合中的每个像素点对应的三维坐标，计算出所述目标采样部位的三维坐标。
[0027]可选地，根据所述咽拭子的三维坐标和所述目标采样部位的三维坐标，确定并提示是否采样成功的步骤包括：
[0028]计算所述咽拭子的三维坐标和所述目标采样部位的三维坐标的欧氏距离，并将所述欧氏距离与预设距离阈值进行对比；
[0029]若所述欧氏距离小于所述预设距离阈值，则获取所述咽拭子和所述目标采样部位的接触时长，并将所述接触时长与预设时长阈值进行对比；
[0030]若所述接触时长大于所述预设时长阈值，则确定并提示采样成功；
[0031]若所述欧氏距离不小于所述预设距离阈值，则确定采样未成功，提示采样人员移动所述咽拭子，重复执行步骤：将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合。
[0032]可选地，若所述接触时长大于所述预设时长阈值，则确定并提示采样成功的步骤之后，所述核酸采样监测方法包括：
[0033]获取采样成功次数，并将所述采样成功次数与预设次数阈值进行对比；
[0034]若所述采样成功次数等于所述预设次数阈值，则确定并提示对所述被采样人的核酸采样完成；
[0035]若所述采样成功次数小于所述预设次数阈值，则提示所述采样人员对调整所述咽拭子的位置，并重复执行步骤：将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合。
[0036]此外，为实现上述目的，本专利技术还提供一种核酸采样监测装置，所述核酸采样监测装置包括：
[0037]检测模块，用于在检测到启动指令时，获取被采样人的人脸视频流，并根据所述人脸视频流确定所述被采样人的嘴部是否张开；
[0038]获取模块，若确定所述嘴部张开，则基于所述人脸视频流获取所述被采样人的口腔二维图像和口腔深度图像；
[0039]确定模块，用于根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功。
[0040]进一步地，所述检测模块还用于：
[0041]将所述人脸视频流输入预先创建的关键点识别模型，通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合；
[0042]根据所述嘴部关键点集合和所述人脸视频流，确定嘴部关键点坐标集合；
[0043]根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开。
[0044]进一步地，所述检测模块还用于：
[0045]根据所述嘴部关键点坐标集合中的嘴角关键点坐标，计算出嘴角间距；
[0046]根据所述嘴部关键点坐标集合中的上唇中心关键点坐标和下唇中心关键点坐标，计算出上下唇间距；
[0047]根本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种核酸采样监测方法，其特征在于，所述核酸采样监测方法包括如下步骤：在检测到启动指令时，获取被采样人的人脸视频流，并根据所述人脸视频流确定所述被采样人的嘴部是否张开；若确定所述嘴部张开，则基于所述人脸视频流获取所述被采样人的口腔二维图像和口腔深度图像；根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功。2.如权利要求1所述的核酸采样监测方法，其特征在于，所述根据所述人脸视频流确定所述被采样人的嘴部是否张开的步骤包括：将所述人脸视频流输入预先创建的关键点识别模型，通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合；根据所述嘴部关键点集合和所述人脸视频流，确定嘴部关键点坐标集合；根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开。3.如权利要求2所述的核酸采样监测方法，其特征在于，所述根据所述嘴部关键点坐标集合，计算出嘴部张开系数，并根据所述嘴部张开系数确定所述被采样人的嘴部是否张开的步骤包括：根据所述嘴部关键点坐标集合中的嘴角关键点坐标，计算出嘴角间距；根据所述嘴部关键点坐标集合中的上唇中心关键点坐标和下唇中心关键点坐标，计算出上下唇间距；根据所述嘴角间距和所述上下唇间距计算出嘴部张开系数，并将所述嘴部张开系数与预设嘴部张开阈值进行对比；若所述嘴部张开系数大于预设嘴部张开阈值，则确定所述被采样人的嘴部张开；若所述嘴部张开系数不大于预设嘴部张开阈值，则确定所述被采样人的嘴部未张开，并将人脸视频流的下一帧图像作为当前帧图像，重复执行步骤：通过所述关键点识别模型确定所述人脸视频流的当前帧图像中所述被采样人的嘴部关键点集合。4.如权利要求1所述的核酸采样监测方法，其特征在于，所述根据所述口腔二维图像、所述口腔深度图像和预设相机参数，确定并提示是否采样成功的步骤包括：将所述口腔二维图像输入预先创建的检测模型，通过所述检测模型确定所述口腔二维图像中的咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合；根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标；根据所述咽拭子的三维坐标和所述目标采样部位的三维坐标，确定并提示是否采样成功。5.如权利要求4所述的核酸采样监测方法，其特征在于，所述根据所述预设相机参数、所述口腔深度图像、所述咽拭子的二维坐标集合和所述目标采样部位的二维坐标集合，计算出所述咽拭子的三维坐标和所述目标采样部位的三维坐标的步骤包括：根据所述预设相机参数、所述口腔深度图像和所述咽拭子的二维坐标集合，计算出所
述口腔二维图像中用于表征所述咽拭子的第一像素点集合中的每个像素点对应的三...
【专利技术属性】
技术研发人员：陈锦海，贾红伟，
申请(专利权)人：深圳市安保数字感控科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。