一种生理状态检测方法、装置、电子设备及存储介质制造方法及图纸

技术编号:33893139 阅读:14 留言:0更新日期:2022-06-22 17:29
本公开提供了一种生理状态检测方法、装置、电子设备及存储介质,其中,该方法包括:获取摄像设备采集的视频流;从视频流中的多帧图像中提取目标对象的多帧脸部图像;确定每帧脸部图像中的至少一个预设平滑区域作为感兴趣区域;从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域;基于目标感兴趣区域的图像信息进行生理状态信息提取,得到目标对象的生理状态检测结果。本公开基于图像处理方式实现生理状态检测,可随时随地进行实时地测量,实用性更佳,且能够通过预设条件的约束实现高质量的目标感兴趣区域的筛选,进而基于目标感兴趣区域的图像信息进行生理状态检测,这可以进一步提升测量的准确度。这可以进一步提升测量的准确度。这可以进一步提升测量的准确度。

【技术实现步骤摘要】
一种生理状态检测方法、装置、电子设备及存储介质


[0001]本公开涉及计算机
,具体而言,涉及一种生理状态检测方法、装置、电子设备及存储介质。

技术介绍

[0002]准确的生理状态数据是分析人体变异性的基础,所以对生理状态的检测有着重要的意义。
[0003]以安全驾驶场景为例,有效的生理状态检测可以帮助了解车内乘员的生理状态,从而为安全驾驶提供辅助性的决策。相关技术中,主要依赖专用的检测设备,如血压仪、心率仪、血氧仪等设备进行生理状态检测,除此之外,还可以借助集成有相关感应元器件的智能手表、智能手环等穿戴设备实现生理状态的测量。
[0004]可知,上述检测方案需要借助专用的仪器进行接触式测量,这为检测带来了不便,从而不能很好地满足诸如安全驾驶场景的需要。

技术实现思路

[0005]本公开实施例至少提供一种生理状态检测方法、装置、电子设备及存储介质。
[0006]第一方面,本公开实施例提供了一种生理状态检测方法,包括:
[0007]获取摄像设备采集的视频流;
[0008]从所述视频流中的多帧图像中提取目标对象的多帧脸部图像;
[0009]确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域;
[0010]从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域;
[0011]基于所述目标感兴趣区域的图像信息进行生理状态信息提取,得到所述目标对象的生理状态检测结果。
[0012]在一种可能的实施方式中,所述从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域,包括:
[0013]确定所述脸部图像对应的图像亮度阈值和每个感兴趣区域的区域图像亮度;
[0014]根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域;
[0015]基于所述至少一个候选感兴趣区域的区域亮度,确定所述目标感兴趣区域。
[0016]在一种可能的实施方式中,所述图像亮度阈值包括最大亮度;
[0017]所述根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域,包括:
[0018]将所述区域图像亮度超过所述最大亮度的第一预设比例的感兴趣区域滤除。
[0019]在一种可能的实施方式中,所述图像亮度阈值包括最小亮度;
[0020]所述根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域,包括:
[0021]将所述区域图像亮度未达到所述最小亮度的第二预设比例的感兴趣区域滤除。
[0022]在一种可能的实施方式中,所述基于所述至少一个候选感兴趣区域的区域亮度,确定所述目标感兴趣区域,包括:
[0023]将所述至少一个候选感兴趣区域中区域亮度最大的候选感兴趣区域,确定为所述目标感兴趣区域。
[0024]在一种可能的实施方式中,在从至少一个感兴趣区域中确定出图像亮度满足预设条件的至少两个目标感兴趣区域的情况下,所述基于所述目标感兴趣区域的图像信息进行生理状态信息提取,包括:
[0025]根据每个目标感兴趣区域的区域图像亮度确定每个目标感兴趣区域的亮度权重;
[0026]基于每个目标感兴趣区域的图像信息进行生理状态信息提取;
[0027]基于所述亮度权重对所述至少两个目标感兴趣区域的生理状态信息提取结果进行融合。
[0028]在一种可能的实施方式中,所述方法还包括:
[0029]对每帧所述脸部图像,进行脸部特征点提取;
[0030]基于提取出的脸部特征点,确定每帧所述脸部图像中的至少一个预设平滑区域。
[0031]在一种可能的实施方式中,所述脸部特征点包括眉毛特征点、鼻梁特征点、鼻尖特征点、脸颊特征点、嘴角特征点;所述预设平滑区域包括以下至少一项:
[0032]基于所述眉毛特征点确定的额头平滑区域、基于所述脸颊特征点、鼻梁特征点和鼻尖特征点确定的左侧上部脸颊平滑区域和右侧上部脸颊平滑区域、基于所述脸颊特征点、鼻尖特征点和嘴角特征点确定的左侧下部脸颊平滑区域和右侧下部脸颊平滑区域。
[0033]在一种可能的实施方式中,所述预设平滑区域包括预定义的多个脸部子区域,每个脸部子区域对应脸部特征点中的多个预设关键特征点;
[0034]所述基于提取出的脸部特征点,确定每帧所述脸部图像中的至少一个预设平滑区域,包括:
[0035]在提取出的脸部特征点中缺失预设关键特征点的情况下,确定缺失的预设关键特征点对应的所述脸部子区域为缺失区域,并确定所述预定义的多个脸部子区域中除所述缺失区域之外的其他脸部子区域为非缺失区域;
[0036]根据提取出的脸部特征点中所述非缺失区域对应的预设关键特征点的位置确定所述非缺失区域的边界,以确定所述至少一个预设平滑区域。
[0037]在一种可能的实施方式中,在所述目标感兴趣区域的图像信息包括对应于多个不同颜色通道的亮度值的情况下,所述基于所述目标感兴趣区域的图像信息进行生理状态信息提取,得到所述目标对象的生理状态检测结果,包括:
[0038]基于所述目标感兴趣区域对应于所述三个颜色通道的亮度值,确定所述目标感兴趣区域对应于每一个所述颜色通道的时域亮度信号;
[0039]对所述目标感兴趣区域对应于多个不同的颜色通道的时域亮度信号进行主成分分析,得到表征所述目标对象的生理状态的时域信号;
[0040]对表征所述目标对象的生理状态的时域信号进行频域转换,得到表征所述目标对象的生理状态的频域信号;
[0041]基于所述频域信号的峰值,确定所述目标对象的生理状态值。
[0042]在一种可能的实施方式中,所述方法还包括:
[0043]在获取到新的视频流的情况下,重复执行以下步骤,直至达到预设检测时长,得到更新后的生理状态检测结果:
[0044]从所述新的视频流中提取目标对象的多帧脸部图像;以及确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域,并从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域;
[0045]基于所述目标感兴趣区域的图像信息对所述生理状态检测结果进行更新。
[0046]第二方面,本公开实施例还提供了一种生理状态检测装置,包括:
[0047]获取模块,用于获取摄像设备采集的视频流;
[0048]提取模块,用于从所述视频流中的多帧图像中提取目标对象的多帧脸部图像;
[0049]选取模块,用于确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域,并从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域;
[0050]检测模块,用于基于所述目标感兴趣区域的图像信息进行生理状态信息提取,得到所述目标对象的生理状态检测结果。
[0051]第三方面,本公开实施例还提供了一种电子设备,包括:处理器、存储器和总线,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种生理状态检测方法,其特征在于,包括:获取摄像设备采集的视频流;从所述视频流中的多帧图像中提取目标对象的多帧脸部图像;确定每帧所述脸部图像中的至少一个预设平滑区域作为感兴趣区域;从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域;基于所述目标感兴趣区域的图像信息进行生理状态信息提取,得到所述目标对象的生理状态检测结果。2.根据权利要求1所述的方法,其特征在于,所述从至少一个感兴趣区域中确定出图像亮度满足预设条件的目标感兴趣区域,包括:确定所述脸部图像对应的图像亮度阈值和每个感兴趣区域的区域图像亮度;根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域;基于所述至少一个候选感兴趣区域的区域亮度,确定所述目标感兴趣区域。3.根据权利要求2所述的方法,其特征在于,所述图像亮度阈值包括最大亮度;所述根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域,包括:将所述区域图像亮度超过所述最大亮度的第一预设比例的感兴趣区域滤除。4.根据权利要求2或3所述的方法,其特征在于,所述图像亮度阈值包括最小亮度;所述根据所述图像亮度阈值和所述区域图像亮度对所述至少一个感兴趣区域过滤,得到至少一个候选感兴趣区域,包括:将所述区域图像亮度未达到所述最小亮度的第二预设比例的感兴趣区域滤除。5.根据权利要求2至4任一项所述的方法,其特征在于,所述基于所述至少一个候选感兴趣区域的区域亮度,确定所述目标感兴趣区域,包括:将所述至少一个候选感兴趣区域中区域亮度最大的候选感兴趣区域,确定为所述目标感兴趣区域。6.根据权利要求1至4任一项所述的方法,其特征在于,在从至少一个感兴趣区域中确定出图像亮度满足预设条件的至少两个目标感兴趣区域的情况下,所述基于所述目标感兴趣区域的图像信息进行生理状态信息提取,包括:根据每个目标感兴趣区域的区域图像亮度确定每个目标感兴趣区域的亮度权重;基于每个目标感兴趣区域的图像信息进行生理状态信息提取;基于所述亮度权重对所述至少两个目标感兴趣区域的生理状态信息提取结果进行融合。7.根据权利要求1至6任一项所述的方法,其特征在于,所述方法还包括:对每帧所述脸部图像,进行脸部特征点提取;基于提取出的脸部特征点,确定每帧所述脸部图像中的至少一个预设平滑区域。8.根据区权利要求7所述的方法,其特征在于,所述脸部特征点包括眉毛特征点、鼻梁特征点、鼻尖特征点、脸颊特征点、嘴角特征点;所述预设平滑区域包括以下至少一项:基于所述眉毛特征点确定的额头平滑区域、基于所述脸颊特征点、鼻梁特征点和鼻尖特征点确定的左侧上部脸颊平滑区域和右侧上部脸颊平滑区域、基于所述脸颊特征点、鼻
尖特征点和嘴角特征点确定的左侧下部脸颊平滑区域和右侧下部脸颊平滑区域。9.根据权利要求7或...

【专利技术属性】
技术研发人员:何裕康高勇毛宁元许亮
申请(专利权)人:上海商汤临港智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1