基于混合现实的远程烹饪方法、装置及终端设备制造方法及图纸

本申请公开了一种基于混合现实的远程烹饪方法、装置及终端设备。该方法包括：混合现实设备接收启动远程烹饪的指令；响应于启动远程烹饪的指令，提供多个远程控制模式的选项，多个远程控制模式与远程设置的机械烹饪设备可执行的多种工作模式分别对应；混合现实设备接收操作者的手势指令并确定手势指令对应于第一远程控制模式，以控制机械烹饪设备进入与第一远程控制模式对应的第一工作模式，其中机械烹饪设备与远程操作者的骨骼关节绑定以能够远程重现远程操作者的烹饪动作；混合现实设备获取操作者的当前烹饪动作，以使机械烹饪设备重现当前烹饪动作。利用本申请实施例能够便捷地实现远程烹饪。地实现远程烹饪。地实现远程烹饪。

【技术实现步骤摘要】
基于混合现实的远程烹饪方法、装置及终端设备


[0001]本申请涉及混合现实
，还涉及烹饪自动化
，具体涉及一种基于混合现实的远程烹饪方法、装置、终端设备、计算机可读存储介质及计算机程序产品。

技术介绍

[0002]混合现实技术(MR)是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和操作者之间搭起一个交互反馈的信息回路，以增强操作者体验的真实感。
[0003]另一方面，现有的烹饪操作可全程由人工完成，也可通过料理机进行处理。但料理机只能进行简单操作，例如制作面食或简单菜品的炒制。而对于人工操作而言，现代生活中用于烹饪的时间逐渐减少，但人们仍希望能吃上一顿自己做的干净美味的饭菜，这样的矛盾尚无法解决。
[0004]针对相关技术中的上述问题，目前尚未发现有效的解决方案。以上仅是专利技术人了解的与本申请有关的背景信息，并不构成对现有技术的自认。

技术实现思路

[0005]有鉴于此，本申请实施例提供一种基于混合现实的远程烹饪方法、终端设备、计算机可读存储介质及计算机程序产品，用于解决至少一种技术问题。其中，基于混合现实的远程烹饪方法，应用于操作者终端，所述操作者终端为混合现实设备，所述方法包括：所述混合现实设备接收启动远程烹饪的指令；响应于所述启动远程烹饪的指令，所述混合现实设备在屏幕上向操作者提供多个远程控制模式的选项，所述多个远程控制模式与远程设置的机械烹饪设备可执行的多种工作模式分别对应；所述混合现实设备接收操作者的手势指令并确定手势指令对应于第一远程控制模式；所述混合现实设备将根据手势指令确定的所述第一远程控制模式的信息发送至所述机械烹饪设备，以控制所述机械烹饪设备进入与所述第一远程控制模式对应的第一工作模式，其中在所述第一工作模式下，所述机械烹饪设备与远程操作者的骨骼关节绑定以能够远程重现远程操作者的烹饪动作；所述混合现实设备获取操作者的当前烹饪动作，以使所述机械烹饪设备重现所述当前烹饪动作。
[0006]可选地，所述多个远程控制模式还包括第二远程控制模式，所述第二远程控制模式用于使所述机械烹饪设备进入第二工作模式，其中在所述第二工作模式下，所述机械烹饪设备能够执行预设的烹饪操作组合。
[0007]可选地，如果所述混合现实设备确定操作者的手势指令对应于所述第二远程控制模式，所述方法还包括：所述混合现实设备在屏幕上提供多个烹饪功能的选项，所述多个烹饪功能与所述机械烹饪设备可执行的多组烹饪操作组合分别对应；所述混合现实设备接收操作者的手势指令并确定手势指令对应于第一烹饪功能；所述混合现实设备将根据手势指令确定的所述第一烹饪功能的信息发送至所述机械烹饪设备，以控制所述机械烹饪设备开始执行与所述第一烹饪功能对应的第一组烹饪操作组合，其中，所述第一组烹饪操作组合
包括所述机械烹饪设备可执行的多项指定的烹饪操作，所述多项指定的烹饪操作完成后实现所述第一烹饪功能。
[0008]可选地，所述烹饪操作包括：开关门、开关火、自动寻路、烹饪材料识别、烹饪材料取放、食材称重、食材预处理或食材烹饪中的至少一种。
[0009]可选地，所述方法还包括：所述机械烹饪设备通过图像识别以识别食材或烹饪工具的种类，其中所述食材包括食物或调料。
[0010]可选地，所述机械烹饪设备包括阻力检测装置，所述方法还包括：当阻力检测单元检测到所述机械烹饪设备的机械臂运动时受到的阻力超过预设的阻力阈值，则暂停执行当前机械臂的操作。
[0011]可选地，所述方法还包括：所述混合现实设备接收当前烹饪场景的画面，当前烹饪场景的画面由所述机械烹饪设备上的摄像头获取并传送。
[0012]本申请实施例提供一种基于混合现实的远程烹饪装置，应用于操作者终端，所述操作者终端为混合现实设备，所述装置包括：
[0013]接收模块，用于接收启动远程烹饪的指令；
[0014]提供模块，用于响应于所述启动远程烹饪的指令，在屏幕上向操作者提供多个远程控制模式的选项，所述多个远程控制模式与远程设置的机械烹饪设备可执行的多种工作模式分别对应；
[0015]确定模块，用于接收操作者的手势指令并确定手势指令对应于第一远程控制模式；
[0016]发送模块，用于将根据手势指令确定的所述第一远程控制模式的信息发送至所述机械烹饪设备，以控制所述机械烹饪设备进入与所述第一远程控制模式对应的第一工作模式，其中在所述第一工作模式下，所述机械烹饪设备与远程操作者的骨骼关节绑定以能够远程重现远程操作者的烹饪动作；
[0017]获取模块，用于获取操作者的当前烹饪动作，以使所述机械烹饪设备重现所述当前烹饪动作。
[0018]本申请实施例提供一种终端设备，所述终端设备包括处理器以及存储有计算机程序指令的存储器，所述处理器执行所述计算机程序指令时实现如上所述的方法的步骤。
[0019]本申请实施例提供一种计算机可读存储介质，所述计算机存储介质上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现如上所述的方法的步骤。
[0020]本申请实施例提供一种计算机程序产品，所述计算机程序产品中包括计算机程序指令，所述计算机程序指令被处理器执行时实现如上所述的方法的步骤。
[0021]本申请方案通过混合现实设备远程操控机械烹饪设备，实现远距离烹饪。不但能实现复杂烹饪操作，而且可以通过混合现实设备对机械烹饪设备进行操作，通过身体关节等部分的识别，实现机械烹饪设备与混合现实设备操作者动作基本一致。本申请可以实现辅助烹饪，让操作者利用碎片时间远程烹饪菜品。本申请还可以实现对机械烹饪设备的远程精细操控，让操作者可以远程进行类似人工的烹饪操作，实现如同本人在厨房能实现的烹饪操作，有助于满足人们对烹饪的个性化要求。
附图说明
[0022]为了更清楚地说明本申请实施例的实现方式，以下对本申请实施例中的附图作简单介绍。
[0023]图1是本申请实施例的基于服务器和终端设备的AR系统架构示意图。
[0024]图2是一种利用手机端APP进行AR导航的虚实融合图像示意图。
[0025]图3是本申请实施例的基于混合现实的远程烹饪方法流程框图。
[0026]图4是本申请实施例的第二远程控制模式下远程烹饪方法流程框图。
[0027]图5是本申请实施例的基于混合现实的远程烹饪装置的结构框图。
[0028]图6是用来实现本申请实施例的基于混合现实的远程烹饪方法的终端设备或服务器的结构示意图。
[0029]图7是本申请实施例的示例性终端设备的软件结构示意图。
具体实施方式
[0030]以下将参考若干示例性实施方式来描述本申请的原理和精神。应当理解，提供这些实施方式的目的是为了使本申请的原理和精神更加清楚和透彻，使本领域技术人员能够更好地理解进而实现本申请的原理和精神。本文中提供的示例性实施方式仅是本申请的一部分实施方式，而不是全部的实施方式。基于本文中的实施方式，本领域普通技术人员在不付出创造性劳本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于混合现实的远程烹饪方法，其特征在于，应用于操作者终端，所述操作者终端为混合现实设备，所述方法包括：所述混合现实设备接收启动远程烹饪的指令；响应于所述启动远程烹饪的指令，所述混合现实设备在屏幕上向操作者提供多个远程控制模式的选项，所述多个远程控制模式与远程设置的机械烹饪设备可执行的多种工作模式分别对应；所述混合现实设备接收操作者的手势指令并确定手势指令对应于第一远程控制模式；所述混合现实设备将根据手势指令确定的所述第一远程控制模式的信息发送至所述机械烹饪设备，以控制所述机械烹饪设备进入与所述第一远程控制模式对应的第一工作模式，其中在所述第一工作模式下，所述机械烹饪设备与远程操作者的骨骼关节绑定以能够远程重现远程操作者的烹饪动作；所述混合现实设备获取操作者的当前烹饪动作，以使所述机械烹饪设备重现所述当前烹饪动作。2.根据权利要求1所述的方法，其特征在于，所述多个远程控制模式还包括第二远程控制模式，所述第二远程控制模式用于使所述机械烹饪设备进入第二工作模式，其中在所述第二工作模式下，所述机械烹饪设备能够执行预设的烹饪操作组合。3.根据权利要求2所述的方法，其特征在于，如果所述混合现实设备确定操作者的手势指令对应于所述第二远程控制模式，所述方法还包括：所述混合现实设备在屏幕上提供多个烹饪功能的选项，所述多个烹饪功能与所述机械烹饪设备可执行的多组烹饪操作组合分别对应；所述混合现实设备接收操作者的手势指令并确定手势指令对应于第一烹饪功能；所述混合现实设备将根据手势指令确定的所述第一烹饪功能的信息发送至所述机械烹饪设备，以控制所述机械烹饪设备开始执行与所述第一烹饪功能对应的第一组烹饪操作组合，其中，所述第一组烹饪操作组合包括所述机械烹饪设备可执行的多项指定的烹饪操作，所述多项指定的烹饪操作完成后实现所述第一烹饪功能。4.根据权利要求3所述的方法，其特征在于，所述烹饪操作包括：开关门、开关火、自动寻路、烹饪材料识别、烹饪材料取放、食材称重、食材预处理或食材烹饪中的至少一种。5.根据权利要求4所述的方法，其特...

【专利技术属性】
技术研发人员：费雯悦，
申请(专利权)人：北京河图联合创新科技有限公司，
类型：发明
国别省市：