一种适用于智慧厨房系统的数字菜谱生成方法及装置制造方法及图纸

本发明专利技术公开了一种适用于智慧厨房系统的数字菜谱生成方法及装置，用以实现较快捷、准确的生成数字菜谱。所述方法，包括：对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；根据替换后的目标对象，生成适用于机械臂的数字菜谱。

【技术实现步骤摘要】
一种适用于智慧厨房系统的数字菜谱生成方法及装置
本专利技术涉及计算机及通信
，特别涉及一种适用于智慧厨房系统的数字菜谱生成方法及装置。
技术介绍
随着科学技术的发展，人工智能技术已走进了人们的生活，尤其是走进了厨房。智能烹饪器具、厨房用机械臂等人工智能设备，可以越来越多取代人工劳动。智能烹饪器具和厨房用机械臂能够工作的前提，是有数字菜谱，厨房用机械臂可运行该数字菜谱，以根据该数字菜谱完成烹饪动作。那么，如何教快捷的生成数字菜谱，则是业内亟待解决的问题。
技术实现思路
本专利技术提供一种适用于智慧厨房系统的数字菜谱生成方法及装置，用以实现较快捷、准确的生成数字菜谱。本专利技术提供一种适用于智慧厨房系统的数字菜谱生成方法，包括：对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；根据替换后的目标对象，生成适用于机械臂的数字菜谱。本专利技术的实施例提供的技术方案可以包括以下有益效果：本实施例可根据厨师的烹饪视频自动生成适用于机械臂的数字菜谱，可方便快捷的实现将真人烹饪视频转换成数字菜谱。本实施例实现了将真人烹饪视频中厨师所采用的物品更换为适合于机械臂采用的物品。可选的，所述第二对象为一个或多个对象；或者，所述第二对象为空。本专利技术的实施例提供的技术方案可以包括以下有益效果：本实施例通过第二对象的数量，实现了替换目标对象，增加目标对象和删除目标对象。可选的，所述目标对象为物品；所述方法还包括：确定为物品的目标对象所属的物品类别；所述在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象，包括：在目标对象符合预设的物品类别时，以及符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象。本专利技术的实施例提供的技术方案可以包括以下有益效果：本实施例通过物品类别缩小了替换目标对象的范围，简化了与关联关系的匹配过程。可选的，对人为烹饪视频进行多模态特征识别，至少包括下列之一：对人为烹饪视频进行图像识别；对人为烹饪视频进行语音识别；对人为烹饪视频进行字幕识别。本专利技术的实施例提供的技术方案可以包括以下有益效果：本实施例提供多种识别方式，以获取较多的信息。可选的，当对人为烹饪视频进行至少两种多模态特征识别时，所述方法还包括：将至少两种多模态特征识别后分别得到的物品和动作，进行彼此融合。本专利技术的实施例提供的技术方案可以包括以下有益效果：本实施例中多种信息可以互相补充、互相融合，有助于生成更完整、准确的数字菜谱。本专利技术提供一种适用于智慧厨房系统的数字菜谱生成装置，包括：识别模块，用于对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；排序模块，用于按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；替换模块，用于在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；生成模块，用于根据替换后的目标对象，生成适用于机械臂的数字菜谱。可选的，所述第二对象为一个或多个对象；或者，所述第二对象为空。可选的，所述目标对象为物品；所述装置还包括：类别模块，用于确定为物品的目标对象所属的物品类别；所述替换模块包括：替换子模块，用于在目标对象符合预设的物品类别时，以及符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象。可选的，所述识别模块至少包括下列之一：图像识别子模块，用于对人为烹饪视频进行图像识别；语音识别子模块，用于对人为烹饪视频进行语音识别；文本识别子模块，用于对人为烹饪视频进行字幕识别。可选的，所述装置还包括：融合模块，用于将至少两种多模态特征识别后分别得到的物品和动作，进行彼此融合。本专利技术提供一种适用于智慧厨房系统的数字菜谱生成装置，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为：对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；根据替换后的目标对象，生成适用于机械臂的数字菜谱。本专利技术提供一种计算机可读存储介质，其上存储有计算机指令，所述指令被处理器执行时实现所述方法的步骤。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。下面通过附图和实施例，对本专利技术的技术方案做进一步的详细描述。附图说明附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，与本专利技术的实施例一起用于解释本专利技术，并不构成对本专利技术的限制。在附图中：图1为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成方法流程图；图2为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成方法流程图；图3为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成方法流程图；图4为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成装置结构图；图5为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成装置结构图；图6为本专利技术实施例中替换模块的结构图；图7为本专利技术实施例中识别模块的结构图；图8为本专利技术实施例中适用于智慧厨房系统的数字菜谱生成装置结构图。具体实施方式以下结合附图对本专利技术的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本专利技术，并不用于限定本专利技术。相关技术中，适用于机械臂的数字菜谱，需要专业技术人员以写代码的方式生成。但是，编程人员可能不熟悉烹饪，且编写代码需要花费较多时间和人力。可能有自动生成数字菜谱的方案，但是该方案生成的数字菜谱可能不够准确。为解决上述问题，本申请的专利技术人发现，有许多展示厨师烹饪过程的美食节目，通过对这些美食烹饪视频的识别和分析，自动生成适用于机械臂的数字菜谱。并且，根据关联关系替换数字菜谱中的目标对象，使得替换后的目标对象更适合于机械臂，也使得数字菜谱更准确。...

【技术保护点】
1.一种适用于智慧厨房系统的数字菜谱生成方法，其特征在于，包括：/n对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；/n按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；/n在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；/n根据替换后的目标对象，生成适用于机械臂的数字菜谱。/n

【技术特征摘要】
1.一种适用于智慧厨房系统的数字菜谱生成方法，其特征在于，包括：
对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；
按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；
在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象；其中，第二对象包括适用于机械臂的对象；
根据替换后的目标对象，生成适用于机械臂的数字菜谱。


2.如权利要求1所述的方法，其特征在于，所述第二对象为一个或多个对象；或者，所述第二对象为空。


3.如权利要求1所述的方法，其特征在于，所述目标对象为物品；
所述方法还包括：
确定为物品的目标对象所属的物品类别；
所述在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象，包括：
在目标对象符合预设的物品类别时，以及符合预设的关联关系所定义的第一对象时，用所述关联关系中与所述第一对象对应的第二对象，替换所述目标对象。


4.如权利要求1所述的方法，其特征在于，对人为烹饪视频进行多模态特征识别，至少包括下列之一：
对人为烹饪视频进行图像识别；
对人为烹饪视频进行语音识别；
对人为烹饪视频进行字幕识别。


5.如权利要求4所述的方法，其特征在于，当对人为烹饪视频进行至少两种多模态特征识别时，所述方法还包括：
将至少两种多模态特征识别后分别得到的物品和动作，进行彼此融合。


6.一种适用于智慧厨房系统的数字菜谱生成装置，其特征在于，包括：
识别模块，用于对人为烹饪视频进行多模态特征识别，识别出目标对象，所述目标对象包括物品和/或动作；
排序模块，用于按照所述人为烹饪视频的播放顺序，对所述目标对象进行初次排序；
替换模块，用于在目标对象符合预设的关联关系所定义的第一对象时，用所述关联关系中...

【专利技术属性】
技术研发人员：李赫，孙雷，
申请(专利权)人：北京如影智能科技有限公司，
类型：发明
国别省市：北京;11