一种人体骨架标注方法、装置及电子设备制造方法及图纸

本申请涉及深度学习技术领域，提供了一种人体骨架标注方法、装置及电子设备，该方法包括：获取待标注的当前帧人体图像及其对应的当前帧骨架关键点信息，并将当前帧人体图像的图像信息及当前帧骨架关键点信息保存为当前帧标注文件，其中，骨架关键点信息包括所述骨架关键点的类型信息和位置信息；利用当前帧标注文件对当前帧人体图像进行标注得到初始标注图像，并判断初始标注图像是否存在漏检或误检以获取判断结果；根据判断结果对当前帧人体图像对应的初始标注图像中存在漏检或误检的骨架关键点进行修正，得到当前帧标注图像。本申请实施例可以快速且准确地获得人体骨架标注图像。图像。图像。

【技术实现步骤摘要】
一种人体骨架标注方法、装置及电子设备


[0001]本申请涉及深度学习
，尤其涉及一种人体骨架标注方法、装置及电子设备。

技术介绍

[0002]人体骨架关键点包括关节和五官等。通过这些关键点来描述人体骨骼信息，对于描述人体姿态，预测人体行为至关重要。近几年，人体骨架关键点的检测方案有了很大的发展，特别是深度学习的崛起，例如openpose、alphapose等检测模型的提出，人体骨架关键点的检测方案在实际场景中的应用也越来越广泛，如娱乐健身、康复训练、动作识别等。
[0003]然而训练一个人体骨架关键点的检测模型，需要使用大量的标注有人体骨架关键点的图像，而人体骨架关键点的标注是一件非常繁琐、精细与耗时的工作。
[0004]目前，人体骨架关键点的标注方法主要分为两种：一种为采用全手动标注的方法，标注人员对大量的待标注图像中的人体骨骼关键点进行一一标注；另一种是采用全自动标注的方法，通常利用一个现成的精度较高的人体骨架关键点检测模型对图像进行检测，获得骨架关键点。
[0005]但是，前一种方法，不可避免地需要投入大量的人力和时间成本，出错率较高，降低了数据集优化和模型建立的效率；后一种方法，对于复杂动作标注效果较差，标注数据的准确度完全依赖于使用的骨架关键点检测模型。

技术实现思路

[0006]有鉴于此，本申请实施例提供了一种人体骨架标注方法、装置及电子设备，能够解决相关技术中的一个或多个技术问题。
[0007]第一方面，本申请一实施例提供了一种人体骨架标注方法，包括：获取待标注的当前帧人体图像及其对应的当前帧骨架关键点信息，并将所述当前帧人体图像的图像信息及所述当前帧骨架关键点信息保存为当前帧标注文件，其中，所述骨架关键点信息包括所述骨架关键点的类型信息和位置信息；利用所述当前帧标注文件对当前帧人体图像进行标注得到初始标注图像，并判断所述初始标注图像是否存在漏检或误检以获取判断结果；根据所述判断结果对所述当前帧人体图像对应的所述初始标注图像中存在漏检或误检的骨架关键点进行修正，得到当前帧标注图像。
[0008]第二方面，本申请一实施例提供一种人体骨架标注装置，包括：获取模块，用于获取待标注的当前帧人体图像及其对应的当前帧骨架关键点信息，并将所述当前帧人体图像的图像信息及所述当前帧骨架关键点信息保存为当前帧标注文件，其中，所述骨架关键点信息包括所述骨架关键点的类型信息和位置信息；判断模块，用于利用所述当前帧标注文件对当前帧人体图像进行标注得到初始标注图像，并判断所述初始标注图像是否存在漏检或误检以获取判断结果；修正模块，用于根据所述判断结果对所述当前帧人体图像对应的所述初始标注图像中存在漏检或误检的骨架关键点进行修正，得到当前帧标注图像。
[0009]第三方面，本申请一实施例提供了一种电子设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面任一实施例所述人体骨架标注方法的步骤。
[0010]第四方面，本申请一实施例提供了一种计算机存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面任一实施例所述人体骨架标注方法的步骤。
[0011]第五方面，本申请一实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备可实现如第一方面任一实施例所述人体骨架标注方法的步骤。
[0012]本申请实施例可以快速且准确地获得人体骨架标注图像。
[0013]在一些实施例中，使用预设骨架检测模型对人体图像进行检测，获得自动标注结果，减少人工标注，大大提高了标注效率。
[0014]在一些实施例中，可视化自动标注结果，方便对自动标注结果进行复检，提高了复检效率，也提高了标注的准确度，获得了置信度更高的数据集。
附图说明
[0015]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0016]图1是本申请一实施例提供的一种电子设备的结构示意图；
[0017]图2A是本申请一实施例提供的一种人体骨架标注方法的实现流程示意图；
[0018]图2B是本申请一实施例提供的另一种人体骨架标注方法的实现流程示意图；
[0019]图3是本申请一实施例提供的一种人体骨架标注方法中步骤S100的实现过程示意图；
[0020]图4是本申请一实施例提供的一种人体骨架关键点的示意图；
[0021]图5是本申请一实施例提供的一种包括初始标注图像的显示界面示意图；
[0022]图6是本申请一实施例提供的一种人体骨架标注装置的结构示意图；
[0023]图7是本申请一实施例提供的另一种人体骨架标注装置的结构示意图。
具体实施方式
[0024]以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。
[0025]在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
[0026]在本申请说明书中描述的“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的
不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
[0027]此外，在本申请的描述中，“多个”的含义是两个或两个以上。
[0028]还应当理解，除非另有明确的规定或限定，术语“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是直接相连，也可以是通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本申请中的具体含义。
[0029]目前采用全人工进行人体骨架标注的方法耗时耗力，成本高，效率低且出错率高。而采用全自动化进行人体骨架标注的方法针对复杂动作标注效果较差，标注数据的准确度又完全依赖于所使用的骨架关键点检测模型。
[0030]因此，本申请实施例提供一种人体骨架标注方法，可实现人体图像中人体骨架快速且准确标注，从而可以促进骨架检测相关技术的开发本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种人体骨架标注方法，其特征在于，包括：获取待标注的当前帧人体图像及其对应的当前帧骨架关键点信息，并将所述当前帧人体图像的图像信息及所述当前帧骨架关键点信息保存为当前帧标注文件，其中，所述骨架关键点信息包括所述骨架关键点的类型信息和位置信息；利用所述当前帧标注文件对所述当前帧人体图像进行标注得到初始标注图像，并判断所述初始标注图像是否存在漏检或误检以获取判断结果；根据所述判断结果对所述当前帧人体图像对应的所述初始标注图像中存在漏检或误检的骨架关键点进行修正，得到当前帧标注图像。2.如权利要求1所述的人体骨架标注方法，其特征在于，在所述获取待标注的当前帧人体图像及其对应的当前帧骨架关键点信息之前，还包括：利用预设骨架检测模型对所述当前帧人体图像进行检测，获得所述当前帧人体图像的骨架关键点信息。3.如权利要求2所述的人体骨架标注方法，其特征在于，若利用所述预设骨架检测模型未检测出所述当前帧人体图像中任一骨架关键点，则对未检测出的所述任一骨架关键点的所述位置信息进行初始化，其中，所述初始化包括所述未检测出的任一骨架关键点的所述位置信息可用位置坐标(0，0)进行初始化；或，初始化所述未检测出的任一骨架关键点以使得未检测出的骨架关键点间隔分布。4.如权利要求3所述的人体骨架标注方法，其特征在于，所述初始化所述未检测出的任一骨架关键点以使得未检测出的骨架关键点间隔分布，包括：初始化未检测出的骨架关键点的坐标为(B*n，0)，其中，n为未检测出的骨架关键点的排序数，B为预设距离间隔。5.如权利要求1所述的人体骨架标注方法，其特征在于，所述根据所述判断结果对所述当前帧人体图像对应的所述初始标注图像中存在漏检或误检的骨架关键点进行修正，包括：针对所述初始标注图像中存在漏检的所述当前帧骨架关键点，重标漏检的所述当前帧骨架关键点；针对所述初始标注图像中存在误检的所述当前帧骨架关键点，调整误检的所述当前帧骨架关键点。6.如权利要求5所述的人体骨架标注方法，其特征在于，所述重标漏检的所述当前帧骨架关键点，包括：响应于用户的第...

【专利技术属性】
技术研发人员：陈宇，钱贝贝，陈侠达，
申请(专利权)人：奥比中光科技集团股份有限公司，
类型：发明
国别省市：