餐具和参照物识别方法、装置及存储介质制造方法及图纸

本申请公开了一种餐具和参照物识别方法、装置及存储介质。其中，该方法包括：获取待识别的图像，其中所述图像包括至少一个餐具和/或参照物；以及利用预设的餐具和参照物识别模型对所述图像进行识别，确定所述至少一个餐具和/或参照物的类别以及所述至少一个餐具和/或参照物在所述图像中的位置信息，其中所述餐具和参照物识别模型基于包括多个餐具和多个参照物的样本图像训练得到。

【技术实现步骤摘要】
餐具和参照物识别方法、装置及存储介质
本申请涉及图像识别
，特别是涉及一种餐具和参照物识别方法、装置及存储介质。
技术介绍
随着计算机视觉技术的不断发展，如何使用计算机视觉技术识别出各类餐具在餐饮界越来越受到领域关注，尤其是在当待识别的图像中包含多个复杂状态目标(例如，包含多个餐具以及参照物)时，如何识别出其中的参照物和餐具尤为关键。目前在图像中识别多个目标时，需要首先通过各种预定义框在图像上密集采样，得到多个图像区域子图，然后分别对各个图像区域子图识别出目标的具体类别和定位出目标在图像中的位置，最后通过筛选方式只保留同一位置上识别效果和定位效果相对最好的类别和定位信息，最终输出识别结果。但是，在上述识别过程中，通过预定义框在图像上密集采样的过程中，无法准确的进行目标定位，当目标定位出现问题的情况下，将无法精准的从包含多目标的图像中切分出包含单一目标的图像区域子图，从而导致基于图像区域子图进行识别后得到的识别结果准确率低。针对上述的现有技术中存在的目前的餐具和参照物识别方法无法准确的进行目标定位，当目标定位出现问题的情况下，基于多本文档来自技高网...

【技术保护点】
1.一种餐具和参照物识别方法，其特征在于，包括：/n获取待识别的图像，其中所述图像包括至少一个餐具和/或参照物；以及/n利用预设的餐具和参照物识别模型对所述图像进行识别，确定所述至少一个餐具和/或参照物的类别以及所述至少一个餐具和/或参照物在所述图像中的位置信息，其中所述餐具和参照物识别模型基于包括多个餐具和多个参照物的样本图像训练得到。/n

【技术特征摘要】
1.一种餐具和参照物识别方法，其特征在于，包括：
获取待识别的图像，其中所述图像包括至少一个餐具和/或参照物；以及
利用预设的餐具和参照物识别模型对所述图像进行识别，确定所述至少一个餐具和/或参照物的类别以及所述至少一个餐具和/或参照物在所述图像中的位置信息，其中所述餐具和参照物识别模型基于包括多个餐具和多个参照物的样本图像训练得到。


2.根据权利要求1所述的方法，其特征在于，利用预设的餐具和参照物识别模型对所述图像进行识别，确定所述至少一个餐具和/或参照物的类别以及所述至少一个餐具和/或参照物在所述图像中的位置信息的操作，包括：
利用包括多个卷积层的卷积模型，生成与所述图像对应的第一图像特征；
利用包括多个残差单元的残差网络模型，对所述第一图像特征进行特征提取，生成第二图像特征；
利用包括识别层的识别模型，对所述第二图像特征进行识别，确定所述至少一个餐具和/或参照物的类别；以及
利用包括位置建模层的位置建模模型，对所述第二图像特征进行位置建模，确定所述至少一个餐具和/或参照物在所述图像中的位置信息。


3.根据权利要求1所述的方法，其特征在于，还包括：利用预设的概率密度模型，评估所确定的所述至少一个餐具和/或参照物在所述图像中的位置信息的精准度。


4.根据权利要求2所述的方法，其特征在于，利用包括位置建模层的位置建模模型，对所述第二图像特征进行位置建模，确定所述至少一个餐具和/或参照物在所述图像中的位置信息的操作，包括：
利用所述位置建模模型，确定所述至少一个餐具和/或参照物的中心点在所述图像中的中心点位置信息；
利用所述位置建模模型，确定所述至少一个餐具和/或参照物的宽高信息；以及
根据所述中心点位置信息和所述宽高信息，确定所述至少一个餐具和/或参照物在所述图像中的位置信息。


5.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，在所述程序运行时由处理器执行权利要求1至4中任意一项所述的方法。


6.一种餐具和参照物识别装置，其特征在于，包括：
图像获取模块，用于获取待识别的图像，其中所述图像包括至少一个餐...

【专利技术属性】
技术研发人员：李利明，何伟，石磊，贺志晶，刘涛，
申请(专利权)人：李利明，
类型：发明
国别省市：北京;11