信息识别方法及装置、家用电器制造方法及图纸

本申请公开了一种信息识别方法及装置、家用电器，用以提高图像特征的整体识别准确率。本申请提供的信息识别方法，包括：采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标；基于用户参与更新的数据库，对所述ROI图像中的目标进行种类识别，确定识别结果。确定识别结果。确定识别结果。

【技术实现步骤摘要】
信息识别方法及装置、家用电器


[0001]本申请涉及智能家电
，尤其涉及一种信息识别方法及装置、家用电器。

技术介绍

[0002]受深度学习技术高速发展的影响，智能家电也越来越受到市场的追捧。
[0003]智能冰箱领域，各大厂商试图通过图像识别食材的种类，从现有图像识别技术来看，图像分类、图像检测、图像检索、图像相似度计算等成为主流的几种具有图像识别能力的算法。

技术实现思路

[0004]本申请实施例提供了一种信息识别方法及装置、家用电器，用以提高图像特征的整体识别准确率。
[0005]本申请实施例提供的一种信息识别方法，包括：
[0006]采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标；
[0007]基于用户参与更新的数据库，对所述ROI图像中的目标进行种类识别，确定识别结果。
[0008]通过该方法，采集目标图像，并提取目标图像的感兴趣区域ROI图像，基于用户参与更新的数据库，对所述ROI图像中的目标进行种类识别，确定识别结果，从而可以实现基于用户参与更新的数据库的图像检测，大大提高了图像特征的整体识别准确率。
[0009]可选地，所述用户参与更新的数据库，是通过如下方式更新的：
[0010]获取用户发起的数据库更新指令；
[0011]基于所述数据库更新指令，获取n1帧采集图像；
[0012]从所述n1帧采集图像中选取n2帧采集图像，并输出展示给用户，供用户选择；
[0013]从所述n2帧采集图像中确定n3帧采集图像，并提取所述n3帧采集图像中目标的特征信息；
[0014]根据用户指示确定所述n3帧采集图像上的目标种类名称；
[0015]将所述目标种类名称匹配到数据库中的种类标识ID，并在所述数据库中新增该种类ID与从所述n3帧采集图像中提取的目标的特征信息的对应关系。
[0016]可选地，从所述n1帧采集图像中选取n2帧采集图像，具体包括：
[0017]确定所述n1帧采集图像中每一采集图像的ROI区域；
[0018]从所述n1帧采集图像中，选取ROI区域内图像质量最高的n2帧采集图像。
[0019]可选地，确定所述n1帧采集图像中每一采集图像的ROI区域，具体包括：
[0020]针对所述n1帧采集图像中每一采集图像，确定该采集图像的深度图中的前景图像第一矩形框；以所述前景图像第一矩形框为基础，向外拓展n个像素，得到前景图像第二矩形框，将所述前景图像第二矩形框的区域作为该采集图像的ROI区域。
[0021]可选地，从所述n2帧采集图像中确定n3帧采集图像，具体包括：
[0022]获取用户选择的n3帧采集图像；
[0023]或者，若所述n2帧采集图像输出展示给用户之后超过预设时长用户未选择n3帧采集图像，则在所述n2帧采集图像中选取ROI区域内质量最高的n3帧采集图像。
[0024]本申请实施例提供的一种信息识别方法，包括：
[0025]采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标；
[0026]通过图像检测或分类算法，和图像检索算法，对所述ROI图像中的目标进行种类识别，确定识别结果。
[0027]通过该方法，采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标，通过图像检测或分类算法，和图像检索算法，对所述ROI图像中的目标进行种类识别，确定识别结果，从而可以实现图像检测或图像分类算法，与图像检索算法的结合使用，提高了图像特征的整体识别准确率。
[0028]可选地，通过图像检测或分类算法，和图像检索算法，对所述ROI图像中的目标进行种类识别，确定识别结果，具体包括：
[0029]通过图像检测或分类算法，对所述ROI图像中的目标进行种类识别，得到第一识别结果；以及，
[0030]通过图像检索算法，对所述ROI图像中的目标进行种类识别，得到第二识别结果；
[0031]将第一识别结果或第二识别结果作为最终的识别结果。
[0032]可选地，该方法还包括：
[0033]按照用户指示，向所述图像检索算法所基于的数据库中新增特征信息。
[0034]也就是说，本申请实施例针对图像检索的入库过程，增加了用户人工参与的机制，可以大大提高图像特征的质量，提高整体的识别准确率。
[0035]可选地，按照用户指示，向所述图像检索算法所基于的数据库中新增特征信息，具体包括：
[0036]获取用户发起的数据库更新指令；
[0037]基于所述数据库更新指令，获取n1帧采集图像；
[0038]从所述n1帧采集图像中选取n2帧采集图像，并输出展示给用户，供用户选择；
[0039]从所述n2帧采集图像中确定n3帧采集图像，并提取所述n3帧采集图像中目标的特征信息；
[0040]根据用户指示确定所述n3帧采集图像上的目标种类名称；
[0041]将所述目标种类名称匹配到数据库中的种类标识ID，并在所述数据库中新增该种类ID与从所述n3帧采集图像中提取的目标的特征信息的对应关系。
[0042]可选地，从所述n1帧采集图像中选取n2帧采集图像，具体包括：
[0043]确定所述n1帧采集图像中每一采集图像的ROI区域；
[0044]从所述n1帧采集图像中，选取ROI区域内图像质量最高的n2帧采集图像。
[0045]可选地，确定所述n1帧采集图像中每一采集图像的ROI区域，具体包括：
[0046]针对所述n1帧采集图像中每一采集图像，确定该采集图像的深度图中的前景图像第一矩形框；以所述前景图像第一矩形框为基础，向外拓展n个像素，得到前景图像第二矩
形框，将所述前景图像第二矩形框的区域作为该采集图像的ROI区域。
[0047]可选地，从所述n2帧采集图像中确定n3帧采集图像，具体包括：
[0048]获取用户选择的n3帧采集图像；
[0049]或者，若所述n2帧采集图像输出展示给用户之后超过预设时长用户未选择n3帧采集图像，则在所述n2帧采集图像中选取ROI区域内质量最高的n3帧采集图像。
[0050]可选地，所述数据库中还包括每一特征信息与置信度的对应关系，其中每一特征信息的置信度是基于该特征信息所对应的采集图像的图像质量确定的。
[0051]可选地，通过图像检索算法，对所述ROI图像中的目标进行种类识别，得到第二识别结果，具体包括：
[0052]确定所述ROI图像中的目标特征信息与数据库里每条特征信息的相似度sim，并通过如下公式加权置信度S后，得到最终的相似度smiFinal：
[0053]smiFinal＝sim*S
[0054]将满足smiFinal>预设阈值T的特征信息所对应的种类ID，作为第二识别结果。
[0055]本申请另一实施例提本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种信息识别方法，其特征在于，该方法包括：采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标；基于用户参与更新的数据库，对所述ROI图像中的目标进行种类识别，确定识别结果。2.根据权利要求1所述的方法，其特征在于，所述用户参与更新的数据库，是通过如下方式更新的：获取用户发起的数据库更新指令；基于所述数据库更新指令，获取n1帧采集图像；从所述n1帧采集图像中选取n2帧采集图像，并输出展示给用户，供用户选择；从所述n2帧采集图像中确定n3帧采集图像，并提取所述n3帧采集图像中目标的特征信息；根据用户指示确定所述n3帧采集图像上的目标种类名称；将所述目标种类名称匹配到数据库中的种类标识ID，并在所述数据库中新增该种类ID与从所述n3帧采集图像中提取的目标的特征信息的对应关系。3.根据权利要求2所述的方法，其特征在于，从所述n1帧采集图像中选取n2帧采集图像，具体包括：确定所述n1帧采集图像中每一采集图像的ROI区域；从所述n1帧采集图像中，选取ROI区域内图像质量最高的n2帧采集图像。4.根据权利要求3所述的方法，其特征在于，确定所述n1帧采集图像中每一采集图像的ROI区域，具体包括：针对所述n1帧采集图像中每一采集图像，确定该采集图像的深度图中的前景图像第一矩形框；以所述前景图像第一矩形框为基础，向外拓展n个像素，得到前景图像第二矩形框，将所述前景图像第二矩形框的区域作为该采集图像的ROI区域。5.根据权利要求2所述的方法，其特征在于，从所述n2帧采集图像中确定n3帧采集图像，具体包括：获取用户选择的n3帧采集图像；或者，若所述n2帧采集图像输出展示给用户之后超过预设时长用户未选择n3帧采集图像，则在所述n2帧采集图像中选取ROI区域内质量最高的n3帧采集图像。6.一种信息识别方法，其特征在于，该方法包括：采集目标图像，并提取目标图像的感兴趣区域ROI图像，所述ROI图像中包括所述目标；通过图像检测或分类算法，和图像检索算法，对所述ROI图像中的目标进行种类识别，确定识别结果。7.根据权利要求6所述的方法，其特征在于，通过图像检测或分类算法，和图像检索算法，对所述ROI图像中的目标进行种类识别，确定识别结果，具体包括：通过图像检测或分类算法，对所述ROI图像中的目标进行种类识别，得到第一识别结果；以及，通过图像检索算法，对所述ROI图像中的目标进行种类识别，得到第二识别结果；将第一识别结果或第二识别结果作为最终的识别结果。8.根据权利要求6所述的方法，其特征在于，该方法还包括：按照用...

【专利技术属性】
技术研发人员：李正义，孙菁，赵启东，谢飞学，
申请(专利权)人：海信集团控股股份有限公司，
类型：发明
国别省市：