用于测量心率的电子装置和方法制造方法及图纸

公开了一种用于测量心率的电子装置和方法。根据本发明专利技术的电子装置的心率测量方法包括以下步骤：捕捉包括用户的面部的图像；将包括在图像中的用户的面部分组为包括相似颜色的多个像素的多个区域；将关于分组后的所述多个区域的信息输入到人工智能学习模型以获取关于用户的心率的信息；并且输出获取的关于心率的信息。因此，电子装置可通过捕捉图像更准确地测量用户的心率。

【技术实现步骤摘要】
【国外来华专利技术】用于测量心率的电子装置和方法
本公开涉及一种用于测量心率的电子装置及其测量方法，并且更具体地，涉及一种用于使用捕捉的面部图像来测量用户的心率的电子装置及其测量方法。
技术介绍
在一般的心率测量方法中，传感器被附接到诸如用户的手指的身体部分，并且通过使用利用附接的传感器感测到的感测信息来测量用户的心率。随着电子技术的发展，已经开发了一种用于在不将单独的传感器附接到用户的身体部分的情况下通过由相机捕捉的图像来测量用户的心率的基于相机的非接触式心率测量方法。基于相机的非接触式心率测量方法是用于捕捉包括用户的面部的图像并通过包括在捕捉图像中的用户的面部皮肤的颜色改变来测量用户的心率的方法。当根据在事件情况(诸如当在面部颜色由于周围环境(例如，室内照明)而暗或亮的状态下捕捉用户的面部时，或者在用户的皮肤根据用户的运动而临时改变时捕捉用户的面部时)下捕捉的面部的图像来测量用户的心率时，上述心率测量方法可能具有测量不正确的心率的问题。
技术实现思路
技术问题本公开的目的是通过由电子装置捕捉的图像来准确地测量用户的心率。技术方案根据实施例，一种电子装置的用于测量心率的方法包括：捕捉包括用户的面部的图像；将包括在图像中的用户的面部分组为包括相似颜色的多个像素的多个区域；将关于分组后的所述多个区域的信息输入到人工智能学习模型以获取关于用户的心率的信息；并且输出获取的关于心率的信息。分组的步骤可包括：基于构成用户的面部的所述多个像素的颜色信息和位置信息将用户的面部分组为多个区域，获取与分组后的所述多个区域中的每个区域相应的颜色值，基于与获取的所述多个区域中的每个区域相应的颜色值将预定颜色范围内的多个区域分组为同一组，并且使用被分组为同一组的多个区域中的每个区域的颜色值来获取被分组为同一组的所述多个区域的脉搏信号。获取的步骤可包括：通过将针对被分组为同一组的所述多个区域的脉搏信号输入到人工智能学习模型来获取关于用户的心率的信息。人工智能学习模型可包括频率分解层和复数层，其中，频率分解层被配置为从输入的脉搏信号获取周期性迭代的周期性属性信息，复数层被配置为将通过频率分解层获取的周期性属性信息转换为人工智能学习模型能够识别的值。所述方法还可包括：获取捕捉图像中的用户的面部区域，并且获取的步骤可包括：使用支持向量机SVM算法获取捕捉图像中的用户的面部区域，并且从获取的用户的面部区域去除眼部、嘴部和颈部。分组的步骤可包括：将眼部、嘴部和颈部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。去除的步骤还可包括：从用户的面部区域去除前额部的区域，并且分组的步骤可包括将眼部、嘴部和前额部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。分组的步骤可包括将眼部、嘴部和前额部被去除的剩余区域中的一些区域的图像分组为包括相似颜色的多个像素的多个区域，并且所述一些区域可包括嘴部的区域被去除的区域。根据另一实施例，一种电子装置包括：捕捉器；输出器，被配置为输出关于心率的信息；以及处理器，被配置为将包括在由捕捉器捕捉的图像中的用户的面部分组为包括相似颜色的多个像素的多个区域，将关于分组后的所述多个区域的信息输入到人工智能学习模型以获取关于用户的心率的信息，并且控制输出器输出获取的关于心率的信息。处理器可基于构成用户的面部的所述多个像素的颜色信息和位置信息将用户的面部分组为多个区域并获取与分组后的所述多个区域中的每个区域相应的颜色值，并且基于与获取的所述多个区域中的每个区域相应的颜色值将预定颜色范围内的多个区域分组为同一组，然后使用被分组为同一组的多个区域中的每个区域的颜色值来获取被分组为同一组的所述多个区域的脉搏信号。处理器可通过将针对被分组为同一组的所述多个区域的脉搏信号输入到人工智能学习模型来获取关于用户的心率的信息。人工智能学习模型可包括频率分解层和复数层，其中，频率分解层被配置为从输入的脉搏信号获取周期性迭代的周期性属性信息，复数层被配置为将通过频率分解层获取的周期性属性信息转换为人工智能学习模型能够识别的值。处理器可使用支持向量机(SVM)算法来获取捕捉的图像中的用户的面部区域，并且从获取的用户的面部区域去除眼部、嘴部和颈部。处理器可将眼部、嘴部和颈部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。处理器还可从用户的面部区域去除前额部的区域，并且将眼部、嘴部和前额部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。处理器可将眼部、嘴部和前额部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域，并且所述一些区域可包括嘴部的区域被去除的区域。有益效果根据实施例，一种电子装置可通过将包括在捕捉图像中的用户的面部按颜色分组为区域，并使用基于分组后的区域的颜色值的数据作为人工智能(AI)模型的输入值，来通过捕捉的图像更准确地测量用户的心率。附图说明图1是示出根据实施例的通过电子装置测量用户的心率的示例图；图2是示出根据实施例的提供关于用户的心率的信息的电子装置的框图；图3是根据实施例的提供关于用户的心率的信息的电子装置的详细框图；图4是示出根据实施例的人工智能学习模型的示例图；图5是根据实施例的通过处理器从捕捉图像获取用户的面部区域的第一示例图；图6是示出根据另一实施例的通过处理器从捕捉的图像获取用户的用户的面部区域的第二示例图；图7是根据实施例的用于更新和使用人工智能学习模型的电子装置的处理器的详细框图；图8是根据实施例的学习单元和获取单元的详细框图；图9是根据实施例的电子装置和外部服务器彼此相关联地学习和确定数据的示例图；图10是根据实施例的用于通过电子装置提供关于用户的心率的信息的方法的流程图；以及图11是根据实施例的用于将用户的面部区域分组为包括相似颜色的多个像素的多个区域的方法的流程图。具体实施方式在下文中，将参照附图描述本公开的各种示例实施例。然而，应理解，本公开不限于具体实施例，而是包括根据本公开的实施例的各种修改、等同物和/或替换物。在整个附图中，相似的组件将由相似的参考标号表示。在本公开中，表述“具有”、“可具有”、“包括”或“可包括”可用于表示特征(例如，组件，诸如数值、功能、操作、部件等)的存在，并且不排除附加特征的存在。在本公开中，表述“A或B”、“A和/或B中的至少一个”或“A和/或B中的一个或更多个”等包括列出项的所有可能组合。例如，“A或B”、“A和B中的至少一个”或“A或B中的至少一个”包括(1)至少一个A、(2)至少一个B、(3)至少一个A和至少一个B同时。此外，本公开中使用的表述“第一”、“第二”等可指示各种组件，而不管组件的顺序和/或重要性，本公开中使用的表述“第一”、“第二”等可被使用以便将一个组件与其他组件区分开，并且本文档来自技高网...

【技术保护点】
1.一种电子装置的用于测量心率的方法，所述方法包括：/n捕捉包括用户的面部的图像；/n将包括在图像中的用户的面部分组为包括相似颜色的多个像素的多个区域；/n通过将关于分组后的所述多个区域的信息输入到人工智能学习模型来获取关于用户的心率的信息；并且/n输出获取的关于心率的信息。/n

【技术特征摘要】
【国外来华专利技术】20180307 KR 10-2018-00270571.一种电子装置的用于测量心率的方法，所述方法包括：
捕捉包括用户的面部的图像；
将包括在图像中的用户的面部分组为包括相似颜色的多个像素的多个区域；
通过将关于分组后的所述多个区域的信息输入到人工智能学习模型来获取关于用户的心率的信息；并且
输出获取的关于心率的信息。


2.如权利要求1所述的方法，其中，分组的步骤包括：
基于构成用户的面部的所述多个像素的颜色信息和位置信息，将用户的面部分组为多个区域；
获取与分组后的所述多个区域中的每个区域相应的颜色值；
基于与获取的所述多个区域中的每个区域相应的颜色值，将预定颜色范围内的多个区域分组为同一组；并且
使用被分组为同一组的多个区域中的每个区域的颜色值来获取针对被分组为同一组的所述多个区域的脉搏信号。


3.如权利要求2所述的方法，其中，获取关于用户的心率的信息的步骤包括：通过将针对被分组为同一组的所述多个区域的脉搏信号输入到人工智能学习模型来获取关于用户的心率的信息。


4.如权利要求3所述的方法，其中，人工智能学习模型包括：
频率分解层，被配置为从输入的脉搏信号获取周期性迭代的周期性属性信息；以及
复数层，被配置为将通过频率分解层获取的周期性属性信息转换为人工智能学习模型能够识别的值。


5.如权利要求1所述的方法，还包括：
获取捕捉的图像中的用户的面部区域，
其中，获取捕捉的图像中的用户的面部区域的步骤包括：
使用支持向量机SVM算法获取捕捉的图像中的用户的面部区域；并且
从获取的用户的面部区域去除眼部、嘴部和颈部。


6.如权利要求5所述的方法，其中，分组的步骤包括：将眼部、嘴部和颈部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。


7.如权利要求5所述的方法，其中：
去除的步骤还包括：从用户的面部区域去除前额部的区域，并且
分组的步骤包括：将眼部、嘴部和前额部的区域被去除的剩余区域的图像分组为包括相似颜色的多个像素的多个区域。


8.如...

【专利技术属性】
技术研发人员：金启显，金俊镐，金炯淳，李泰汉，韩宗熙，朴相培，白炫宰，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR