This application discloses a menu recognition method, which belongs to the field of computer technology, and solves the problem of inefficient menu entry in the prior art. The menu recognition method disclosed in the embodiment of this application includes: acquiring the menu image of the target menu; determining the product name to be inputted in the target menu and correcting the auxiliary information of the product name according to the information of the menu image; determining the candidate product name corresponding to the product name in the knowledge base according to the auxiliary information; and matching the candidate product name according to the candidate product name. The product name is corrected. The menu recognition method disclosed in the embodiment of this application effectively improves the efficiency of menu entry by acquiring auxiliary information to reduce the knowledge base for correcting the recognition results.
【技术实现步骤摘要】
菜单识别方法、装置、电子设备及存储介质
本申请涉及计算机
，特别是涉及一种菜单识别方法、装置、电子设备及存储介质。
技术介绍
随着信息技术的发展，很多应用场景都需要电子菜单，例如电商平台中商户的菜单、收银系统等。现有技术中常用的电子菜单的生成时菜单录入方法是通过拍照识别技术，录入菜单的菜名等信息。例如：首先通过图像采集设备拍摄菜单图像，然后对菜单图像中的文字区域进行检测和识别，并根据识别结果，解析出产品名称、价格等结果；最后，通过识别得到的产品名称和产品名称知识库中的产品名称进行匹配，得到与识别得到的产品名称距离最近的产品名称词条，作为校正后的产品名称。由于产品名称知识库通常包括海量产品名称，因此，将识别得到的产品名称与产品名称知识库中产品名称进行逐一匹配，运算量巨大，菜单录入效率低下。
技术实现思路
本申请提供一种菜单识别方法，可以通过自动识别菜单并录入识别结果，至少解决现有技术中存在的菜单录入效率低下的问题。第一方面，本申请实施例提供了一种菜单识别方法包括：获取目标菜单的菜单图像；根据所述菜单图像的信息，确定所述目标菜单中待录入的产品名称和校正所述产品名称的...
【技术保护点】
1.一种菜单识别方法，其特征在于，包括：获取目标菜单的菜单图像；根据所述菜单图像的信息，确定所述目标菜单中待录入的产品名称和校正所述产品名称的辅助信息；根据所述辅助信息在知识库中确定所述产品名称对应的候选产品名称；根据所述候选产品名称对所述产品名称进行校正。
【技术特征摘要】
1.一种菜单识别方法，其特征在于，包括：获取目标菜单的菜单图像；根据所述菜单图像的信息，确定所述目标菜单中待录入的产品名称和校正所述产品名称的辅助信息；根据所述辅助信息在知识库中确定所述产品名称对应的候选产品名称；根据所述候选产品名称对所述产品名称进行校正。2.根据权利要求1所述的方法，其特征在于，所述根据所述菜单图像的信息，确定所述目标菜单中待录入的产品名称和校正所述产品名称的辅助信息的步骤，包括：根据所述菜单图像中的文本信息，确定所述目标菜单中待录入的产品名称；以及，根据所述菜单图像中的文本信息、产品图像、所述菜单图像的位置属性中任意一项或多项信息的组合，确定校正所述产品名称的辅助信息。3.根据权利要求2所述的方法，其特征在于，所述根据所述菜单图像中的文本信息、产品图像、所述菜单图像的位置属性中任意一项或多项信息的组合，确定校正所述产品名称的辅助信息的步骤，包括：根据所述菜单图像中文本区域包含的文本信息，确定校正所述产品名称的辅助信息；其中，所述根据所述菜单图像中文本区域包含的文本信息，确定校正所述产品名称的辅助信息的步骤，进一步包括：将所述菜单图像中文本区域包含的文本信息输入至预设的文本分类模型；将所述文本分类模型输出的产品类别，确定为校正所述产品名称的辅助信息。4.根据权利要求2所述的方法，其特征在于，所述根据所述菜单图像中的文本信息、产品图像、所述菜单图像的位置属性中任意一项或多项信息的组合，确定校正所述产品名称的辅助信息的步骤，包括：根据所述菜单图像中包含的产品图像，确定校正所述产品名称的辅助信息；其中，所述根据所述菜单图像中包含的产品图像，确定校正所述产品名称的辅助信息的步骤，进一步包括：通过对所述菜单图像进行版面分析，确定所述菜单图像中与所述产品名称对应的产品图像；通过对所述产品图像进行分类识别，确定所述产品图像对应的产品名称和/或产品类别；当对所述产品图像进行分类识别得到的分类结果中包括产品类别时，将所述产品类别作为校正所述产品图像对应的所述产品名称的辅助信息；当对所述产品图像进行分类识别得到的分类结果中仅包括产品名称时，将分类识别得到的所述产品名称作为校正所述产品图像对应的所述产品名称的辅助信息。5.根据权利要求2所述的方法，其特征在于，所述根据所述菜单图像中的文本信息、产品图像、所述菜单图像的位置属性中任意一项或多项信息的组合，确定校正所述产品名称的辅助信息的步骤，包括：根据所述菜单图像的位置属性，确定校正所述产品名称的辅助信息；其中，根据所述菜单图像的位置属性，确定校正所述产品名称的辅助信息的步骤，进一步包括：根据所述菜单图像的位置属性，确定所述位置属性对应的商家；将所述商家关联的产品类别，作为校正所述菜单图像上的所述产品名称的辅助信息。6.根据权利要求3至5任一项所述的方法，其特征在于，所述根据所述辅助信息在知识库中确定所述产品名称对应的候选产品名称的步骤之前，还包括：当确定的所述辅助信息中包括根据所述菜单图像的至少两项信息确定的辅助信息时，按照预设策略对根据所述至少两项信息确定的辅助信息进行融合处理，其中，所述预设融合策略包括以下任意一项或多项：根据确定的所述辅助信息的置信度分别择优选择所述至少两项信息中每项信息对应的预设数量的辅助信息；取根据所述至少两项信息确定的辅助信息的交集中的辅助信息；取根据所述至少两项信息确定的辅助信息的并集中的辅助信息。7.根据权利要求1所述的方法，其特征在于，所述根据所述辅助信息在知识库中确定所述产品名称对应的候选产品名称的步骤，包括：当所述辅助信息包括产品类别时，确定预先获取的知识库中属于所述产品类别的产品名称，作为待录入的所述产品名称对应的候选产品名称；当所述辅助信息包括产品名称时，确定预先获取的知识库中与所述辅助信息包括的产品名称相似度距离满足预设条件的产品名称，作为待录入的所述产品名称对应的候选产品名称...
【专利技术属性】
技术研发人员：冯丹，马彬，魏晓明，
申请(专利权)人：北京三快在线科技有限公司，
类型：发明
国别省市：北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。