关键点检测的方法、装置、电子设备及存储介质制造方法及图纸

本公开提供了一种关键点检测的方法、装置、电子设备及存储介质，该方法包括：确定包括目标对象的目标图像；对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；基于所述目标对象的每个所述目标部位对应的检测框的位置点信息，对每个所述目标部位在所述目标图像中的图像区域进行第二关键点检测，得到每个所述目标部位对应的第二关键点信息；基于所述第一关键点信息和所述第二关键点信息，确定所述目标对象的对象关键点信息。

【技术实现步骤摘要】
关键点检测的方法、装置、电子设备及存储介质
本公开涉及计算机视觉
，具体而言，涉及一种关键点检测的方法、装置、电子设备及存储介质。
技术介绍
近年来，关键点检测在视频分析中起到至关重要的作用，比如，在安防领域内，可以通过检测视频或图像中目标对象的脸部关键点，对该目标对象进行识别。目前在虚拟现实、增强现实等应用场景中，需要对目标对象的多种关键点进行检测，以提高目标对象显示的真实性，比如，多种关键点可以包括肢体关键点、手势关键点、面部关键点等。因此，设计一种对关键点进行检测的方法至关重要。
技术实现思路
有鉴于此，本公开至少提供一种关键点检测的方法、装置、电子设备及存储介质。第一方面，本公开提供了一种关键点检测的方法，包括：确定包括目标对象的目标图像；对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；基于所述目标对象的每个所述目标部位对应的检测框的位置点本文档来自技高网...

【技术保护点】
1.一种关键点检测的方法，其特征在于，包括：/n确定包括目标对象的目标图像；/n对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；/n基于所述目标对象的每个所述目标部位对应的检测框的位置点信息，对每个所述目标部位在所述目标图像中的图像区域进行第二关键点检测，得到每个所述目标部位对应的第二关键点信息；/n基于所述第一关键点信息和所述第二关键点信息，确定所述目标对象的对象关键点信息。/n

【技术特征摘要】
1.一种关键点检测的方法，其特征在于，包括：
确定包括目标对象的目标图像；
对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；
基于所述目标对象的每个所述目标部位对应的检测框的位置点信息，对每个所述目标部位在所述目标图像中的图像区域进行第二关键点检测，得到每个所述目标部位对应的第二关键点信息；
基于所述第一关键点信息和所述第二关键点信息，确定所述目标对象的对象关键点信息。


2.根据权利要求1所述的方法，其特征在于，所述对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息，包括：
对所述目标图像进行第一卷积处理，得到第一特征图；
基于所述第一特征图，确定所述目标对象的关键位置信息；
所述基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，对该目标部位在所述目标图像中的图像区域进行第二关键点检测，得到该目标部位对应的第二关键点信息，包括：
基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，从所述第一特征图中截取与每个所述目标部位对应的第二特征图；
基于所述第二特征图，确定每个所述目标部位对应的第二关键点信息。


3.根据权利要求2所述的方法，其特征在于，根据以下步骤对目标特征图进行卷积处理，确定目标关键点信息，其中，在所述目标特征图为所述第一特征图的情况下，所述目标关键点信息为所述目标对象的关键位置信息，在所述目标特征图为所述第二特征图的情况下，所述目标关键点信息为所述目标部位对应的第二关键点信息：
对所述目标特征图进行多次特征处理，生成多个尺寸不同的中间特征图；
将多个所述中间特征图进行融合处理，得到融合特征图；
基于所述融合特征图，确定所述目标关键点信息。


4.根据权利要求3所述的方法，其特征在于，所述对所述目标特征图进行多次特征处理，包括：根据以下步骤进行当前次特征处理：
针对进行当前次特征处理前的不同尺寸的特征图，分别进行至少一级卷积处理，得到不同尺寸的卷积特征图；
将所述不同尺寸的卷积特征图进行多种融合处理，得到当前次特征处理后的不同尺寸的特征图。


5.根据权利要求2至4任一所述的方法，其特征在于，所述第一特征图包括多级第一特征图，不同级第一特征图为经过不同级卷积处理得到的，所述基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，从所述第一特征图中截取与该目标部位对应的第二特征图，包括：
基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，从所述多级第一特征图中的不同级第一特征图中，分别截取与所述目标部位对应的第二特征图。


6.根据权利要求1至5任一所述的方法，其特征在于，所述目标对象包括人物，第一关键点至少分布在所述人物的四肢、头部上；
所述第一关键点的数量范围为5～25。


7.根据权利要求1至6任一所...

【专利技术属性】
技术研发人员：金晟，刘文韬，钱晨，
申请(专利权)人：北京市商汤科技开发有限公司，
类型：发明
国别省市：北京;11