一种生理状态检测方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种生理状态检测方法、装置、电子设备及存储介质，其中，该方法包括：获取车舱内的视频流；对视频流中的多帧图像进行脸部检测，提取出车舱内的目标对象的多帧脸部图像；确定每帧脸部图像中的至少一个预设平滑区域作为感兴趣区域；基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，得到目标对象的生理状态检测结果。本公开通过确定每帧脸部图像中的预设平滑区域可以查找到更为适应于进行生理状态分析的图像信息，这样所确定的生理状态检测结果也更为准确，除此之外，本公开采用的是无接触检测方式实现的生理状态检测，便于部署实施。便于部署实施。便于部署实施。

【技术实现步骤摘要】
一种生理状态检测方法、装置、电子设备及存储介质


[0001]本公开涉及计算机
，具体而言，涉及一种生理状态检测方法、装置、电子设备及存储介质。

技术介绍

[0002]准确的生理状态数据是分析人体变异性的基础，所以对生理状态的检测有着重要的意义，从而被广泛应用于各个应用场景。
[0003]以安全驾驶场景为例，有效的生理状态检测可以帮助了解车内乘员的生理状态，从而为安全驾驶提供辅助性的决策。相关技术中，主要依赖专用的检测设备，如血压仪、心率仪、血氧仪等设备进行生理状态检测，除此之外，还可以借助集成有相关感应元器件的智能手表、智能手环等穿戴设备实现生理状态的测量。
[0004]可知，上述检测方案需要借助专用的仪器进行接触式测量，这为检测带来了不便，从而不能很好地满足诸如安全驾驶场景的需要。

技术实现思路

[0005]本公开实施例至少提供一种生理状态检测方法、装置、电子设备及存储介质。
[0006]第一方面，本公开实施例提供了一种生理状态检测方法，包括：
[0007]获取车舱内的视频流；
[0008]对所述视频流中的多帧图像进行脸部检测，提取出所述车舱内的目标对象的多帧脸部图像；
[0009]确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域；
[0010]基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，得到所述目标对象的生理状态检测结果。
[0011]采用上述生理状态检测方法，在获取到车舱内的视频流的情况下，可以首先对视频流中的多帧图像进行脸部检测以提取出车舱内的目标对象的多帧脸部图像，然后可以确定每帧脸部图像中的至少一个预设平滑区域作为感兴趣区域，并能够基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，从而得到目标对象的生理状态检测结果。本公开在进行生理状态信息提取之前，通过确定每帧脸部图像中的预设平滑区域可以查找到更为适应于进行生理状态分析的图像信息，这样所确定的生理状态检测结果也更为准确，除此之外，本公开采用的是无接触检测方式实现车舱内对象的生理状态检测，便于操作。
[0012]在一种可能的实施方式中，所述确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域，包括：
[0013]对每帧所述脸部图像，进行脸部特征点提取；
[0014]基于提取出的脸部特征点，确定每帧所述脸部图像中的至少一个预设平滑区域，作为所述脸部图像的感兴趣区域。
[0015]在一种可能的实施方式中，所述预设平滑区域包括额头区域、左侧脸颊区域、右侧脸颊区域、下巴区域中的至少一个。
[0016]在一种可能的实施方式中，在每帧所述脸部图像确定出的感兴趣区域为多个的情况下，所述基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，包括：
[0017]确定所述脸部图像中的每个所述感兴趣区域的图像质量；
[0018]选取图像质量符合预设要求的感兴趣区域作为目标感兴趣区域；
[0019]基于多帧脸部图像中的一个或多个目标感兴趣区域的图像信息进行生理状态信息提取。
[0020]在一种可能的实施方式中，所述确定所述脸部图像中的每个所述感兴趣区域的图像质量，包括：
[0021]基于每个所述感兴趣区域的亮度、遮挡情况、面积、信噪比中的至少一项，确定每个所述感兴趣区域的图像质量。
[0022]在一种可能的实施方式中，所述方法还包括：
[0023]根据每帧所述脸部图像检测所述目标对象的脸部姿态；以及
[0024]在确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域之后，根据所述脸部姿态从感兴趣区域中去除图像中可见范围不满足预设的可见性要求的感兴趣区域。
[0025]在一种可能的实施方式中，所述图像信息包括对应于多个不同颜色通道的亮度值，所述基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，得到所述目标对象的生理状态检测结果，包括：
[0026]基于多帧脸部图像中的至少一个感兴趣区域对应于所述三个颜色通道的亮度值，确定所述至少一个感兴趣区域对应于每一个所述颜色通道的时域亮度信号；
[0027]对所述至少一个感兴趣区域对应于多个不同的颜色通道的时域亮度信号进行主成分分析，得到表征所述目标对象的生理状态的时域信号；
[0028]基于表征所述目标对象的生理状态的时域信号确定所述目标对象的生理状态信息。
[0029]在一种可能的实施方式中，所述基于表征所述目标对象的生理状态的时域信号确定所述目标对象的生理状态信息，包括：
[0030]对表征所述目标对象的生理状态的时域信号进行频域转换，得到表征所述目标对象的生理状态的频域信号；
[0031]基于所述频域信号的峰值，确定所述目标对象的生理状态值。
[0032]在一种可能的实施方式中，所述方法还包括：
[0033]在获取到新的视频流包括的一帧或多帧图像的情况下，重复执行以下步骤，直至达到预设检测时长，得到更新后的生理状态检测结果：
[0034]对所述新的视频流中的所述图像进行脸部检测，提取出所述车舱内的目标对象的脸部图像；
[0035]确定所述脸部图像中的至少一个预设平滑区域作为感兴趣区域；
[0036]基于所述脸部图像中的感兴趣区域的图像信息对所述生理状态检测结果进行更新。
[0037]在一种可能的实施方式中，所述方法还包括：
[0038]根据已获取的视频流的时长和所述预设检测时长生成用于提醒所述目标对象所需检测时长的检测进程提醒信号。
[0039]在一种可能的实施方式中，所述提取出所述车舱内的目标对象的多帧脸部图像，包括：
[0040]根据所述多帧图像的脸部检测结果，以及指定的乘车位置，从检测出的脸部图像中确定出目标对象的多帧脸部图像，其中，所述指定的乘车位置用于指示被测量的目标对象的位置。
[0041]在一种可能的实施方式中，所述方法还包括：
[0042]向所述车舱内的显示屏传送所述目标对象的生理状态检测结果，以在所述显示屏上进行显示；和/或
[0043]向生理状态检测应用的服务端传送所述目标对象的生理状态检测结果，以在所述目标对象通过所述生理状态检测应用请求获取所述检测结果的情况下，通过所述服务端向所述目标对象使用的终端设备发送所述生理状态检测结果。
[0044]在一种可能的实施方式中，在获取车舱内的视频流之后，所述方法还包括：
[0045]对所述视频流中的目标对象进行身体姿态检测，得到所述目标对象的姿态变化信息；
[0046]在得到所述目标对象的生理状态检测结果之后，所述方法还包括：
[0047]在所述姿态变化信息指示目标对象姿态异常、且所述生理状态检测结果不符合预设生理状态值的情况下，生成用于提醒所述目标对象的关联对象进行紧急救助的提醒信号。
[0048]第二方面，本公开实施例还提供了一种生理状态检测装置，包本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种生理状态检测方法，其特征在于，包括：获取车舱内的视频流；对所述视频流中的多帧图像进行脸部检测，提取出所述车舱内的目标对象的多帧脸部图像；确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域；基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，得到所述目标对象的生理状态检测结果。2.根据权利要求1所述的方法，其特征在于，所述确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域，包括：对每帧所述脸部图像，进行脸部特征点提取；基于提取出的脸部特征点，确定每帧所述脸部图像中的至少一个预设平滑区域，作为所述脸部图像的感兴趣区域。3.根据区权利要求1或2所述的方法，其特征在于，所述预设平滑区域包括额头区域、左侧脸颊区域、右侧脸颊区域、下巴区域中的至少一个。4.根据权利要求1至3任一项所述的方法，其特征在于，在每帧所述脸部图像确定出的感兴趣区域为多个的情况下，所述基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，包括：确定所述脸部图像中的每个所述感兴趣区域的图像质量；选取图像质量符合预设要求的感兴趣区域作为目标感兴趣区域；基于多帧脸部图像中的一个或多个目标感兴趣区域的图像信息进行生理状态信息提取。5.根据权利要求4所述的方法，其特征在于，所述确定所述脸部图像中的每个所述感兴趣区域的图像质量，包括：基于每个所述感兴趣区域的亮度、遮挡情况、面积、信噪比中的至少一项，确定每个所述感兴趣区域的图像质量。6.根据权利要求1至5任一项所述的方法，其特征在于，所述方法还包括：根据每帧所述脸部图像检测所述目标对象的脸部姿态；以及在确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域之后，根据所述脸部姿态从感兴趣区域中去除图像中可见范围不满足预设的可见性要求的感兴趣区域。7.根据权利要求1至6任一项所述的方法，其特征在于，所述图像信息包括对应于多个不同颜色通道的亮度值，所述基于多帧脸部图像中的各感兴趣区域的图像信息进行生理状态信息提取，得到所述目标对象的生理状态检测结果，包括：基于多帧脸部图像中的至少一个感兴趣区域对应于所述三个颜色通道的亮度值，确定所述至少一个感兴趣区域对应于每一个所述颜色通道的时域亮度信号；对所述至少一个感兴趣区域对应于多个不同的颜色通道的时域亮度信号进行主成分分析，得到表征所述目标对象的生理状态的时域信号；基于表征所述目标对象的生理状态的时域信号确定所述目标对象的生理状态信息。8.根据权利要求7所述的方法，其特征在于，所述基于表征所述目标对象的生理状态的时域信号确定所述目标对象的生理状态信息，包括：
对表征所述目标对象的生理状态的时域信号进行频域转换，得到表征所述目标对象的生理状态的频域信号；基于所述频域信号的峰值，确定所述目标对象的生理状态值。9.根据权利要求...

【专利技术属性】
技术研发人员：高勇，何裕康，毛宁元，许亮，
申请(专利权)人：上海商汤临港智能科技有限公司，
类型：发明
国别省市：