服饰识别方法、装置、设备及存储介质制造方法及图纸

本发明专利技术实施例提供了一种服饰识别方法、装置、设备及存储介质，该方法包括：从待识别视频中提取多个不同时刻的关键帧；对关键帧进行服饰区域检测；对检测到的目标服饰区域，提取目标服饰区域的特征，目标服饰区域的特征至少包括图像特征；基于各目标服饰区域的特征，将各目标服饰区域进行聚类，以得到至少一类目标服饰区域；针对每类目标服饰区域，将该类目标服饰区域中的各目标服饰区域的图像特征融合成一个目标图像特征，以及基于目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果。如此，提高了服饰识别的准确率。提高了服饰识别的准确率。提高了服饰识别的准确率。

【技术实现步骤摘要】
服饰识别方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理
，特别是涉及一种服饰识别方法、装置、设备及存储介质。

技术介绍

[0002]服饰是人们日常生活中必不可少的物品。随着网络购物平台的出现，人们经常在网络购物平台上购买服饰，这极大地方便了人们的生活。相关技术中，为了进一步地为人们提供便利，针对视频中出现的服饰，可以通过服饰识别技术进行识别，为人们提供相关服饰的信息。现有的服饰识别技术仍处于发展阶段，识别准确率仍然较低，难以达到实际应用场景的识别需求，举例来说，目前大部分服饰识别技术基于开源数据集的最大准确率低于70％，难以达到实际应用场景要求的准确率高于90％的识别需求。尤其是容易出现如下识别问题：由于服饰是非刚性物体，人物姿态差异容易带来服饰区域的遮挡与不完整露出等情况，这可能导致t1时刻(例如展示服饰的正面的时刻)与t2时刻(例如展示服饰的背部的时刻)两个不同时刻出现的同一款服饰被识别为不同的服饰，或t3时刻(例如展示纯白色的T恤背部)与t4时刻(例如展示正面胸前有大面积图案，但背部为纯白色的T恤背部)两个不同时刻出本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种服饰识别方法，其特征在于，包括：从待识别视频中提取多个不同时刻的关键帧；对所述关键帧进行服饰区域检测；对检测到的目标服饰区域，提取所述目标服饰区域的特征，所述目标服饰区域的特征至少包括图像特征；基于各所述目标服饰区域的特征，将各所述目标服饰区域进行聚类，以得到至少一类目标服饰区域；针对每类目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果。2.根据权利要求1所述的方法，其特征在于，所述目标服饰区域的特征还包括时域特征。3.根据权利要求2所述的方法，其特征在于，所述基于各所述目标服饰区域的特征，将各所述目标服饰区域进行聚类，以得到至少一类目标服饰区域，包括：针对每个所述目标服饰区域，确定该目标服饰区域对应的关联服饰区域，以及确定该目标服饰区域对应的关联信息，其中，所述关联服饰区域来自候选服饰区域集合，所述候选服饰区域集合所包含的候选服饰区域是所述时域特征所表征的时刻早于该目标服饰区域的目标服饰区域，所述关联服饰区域是所述候选服饰区域集合中特征与该目标服饰区域最相似的候选服饰区域，所述关联信息包含该目标服饰区域的标识与对应的所述关联服饰区域的标识形成的标识组合；将各所述目标服饰区域对应的所述标识组合进行分类，以得到至少一类标识组合，其中，同一类的各所述标识组合能够首尾顺序拼接形成标识串，相拼接的两个所述标识组合中，相拼接的部分的标识相同；针对每类标识组合，将该类标识组合对应的各所述目标服饰区域作为一类。4.根据权利要求3所述的方法，其特征在于，在所述针对每类标识组合，将该类标识组合对应的各所述目标服饰区域作为一类之后，在所述针对每类所述目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果之前，还包括：将已分类的至少一类目标服饰区域作为至少一个聚类对象，进行再次聚类，以得到所述再次聚类对应的至少一类目标服饰区域；所述针对每类目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果，包括：针对所述再次聚类对应的至少一类目标服饰区域中的每类目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果。5.根据权利要求3所述的方法，其特征在于，所述针对每类所述目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果，包括：
针对已分类的至少一类目标服饰区域的每类所述目标服饰区域，将该类目标服饰区域中的各所述目标服饰区域的图像特征融合成一个目标图像特征，以及基于所述目标图像特征，进行服饰识别，以得到该类目标服饰区域的识别结果；所述方法还包括：将已分类的至少一类目标服饰区域作为至少一个聚类对象，进行再次聚类，以得到所述再次聚类对应的至少一类目标服饰区域；针对所述再次聚类对应的至少一类目标服饰区域中的每类目标服饰区域，从该类目标服饰区域中的各聚类对象的识别结果中，选择出至少一个候选款式，作为该类目标服饰区域的识别结果。6.根据权利要求3所述的方法，其特征在于，所述针对每个所述目标服饰区域，确定该目标服饰区域对应的关联服饰区域，包括：针对每个所述目标服饰区域，分别确定该目标服饰区域的特征与所述候选服饰区域集合中的每个所述候选服饰区域的特征之间的特征距离，选择所述特征距离最小的一个所述候选服饰区域，作为所述关联服饰区域。7.根据权利要求6所述的方法，其特征在于，所述分别确定该目标服饰区域的特征与所述候选服饰区域集合中的每个所述候选服饰区域的特征之间的特征距离，包括：计算该目标服饰区域的图像特征与所述候选服饰区域的图像特征之间的距离，以作为第一距离；计算该目标服饰区域的时域特征与所述候选服饰区域的时域特征之间的距离，以作为第二距离；基于所述第二距离，确定所述第一距离的权重系数；基于所述第一距离与所述权重系数，确定该目标服饰区域的特征与所述候选服饰区域的特征之间的特征距离；其中，所述第二距离越大，所述第...

【专利技术属性】
技术研发人员：李冠楠，
申请(专利权)人：北京爱奇艺科技有限公司，
类型：发明
国别省市：