一种智能冰箱、角度的确定及食材识别方法技术

本申请公开了一种智能冰箱、角度的确定及食材识别方法，用以解决现有冰箱门体被打开的角度确定方法，确定的冰箱角度不够准确的问题。由于本申请在冰箱门体上安装地磁传感器，当处理器检测到冰箱门体被打开时，获取地磁传感器测量的地磁在地磁传感器的当前位置的磁场强度在横轴方向的投影的横轴磁场强度，后续基于该横轴磁场强度，确定冰箱门体被打开的角度，从而实现了基于地磁传感器测量的磁场强度，确定冰箱门体被打开的角度。确定冰箱门体被打开的角度。确定冰箱门体被打开的角度。

【技术实现步骤摘要】
一种智能冰箱、角度的确定及食材识别方法


[0001]本申请涉及智能家电
，尤其涉及一种智能冰箱、冰箱门体被打开角度的确定及食材识别方法、装置、设备及介质。

技术介绍

[0002]当前人工智能技术和家电的结合越来越紧密，冰箱作为家电中使用频率高、使用时间长的典型家电之一，其智能化发展已经成为当前聚焦的方向之一。冰箱的制冷技术、容积、外观的差异日趋缩小，而食材精准管理、智能交互等技术成为提高产品差异化的重要实现方式。
[0003]智能冰箱的发展中，食材识别是最大亮点之一，尽管存在食材种类繁多，同种食材形态差异大，存取场景复杂等一系列问题，但是随着深度学习算法的快速发展，识别准确率也越来越高。然而在采集冰箱门体的搁物架上的食材图像时，由于冰箱门体被打开不同的角度，该食材图像中的食材会发生一定的变形，导致后续根据该食材图像进行食材识别时，识别结果准确率低。而获取冰箱门体被打开的角度，通过冰箱门体被打开的角度校准采集的冰箱门体的搁物架上的食材图像，是提高食材识别的准确率的重要手段。因此，如何获取冰箱门体被打开的角度是近几年来人们日益关注的问题。
[0004]现有技术中，为了可以获取冰箱门体被打开的角度，一般在冰箱门体上安装陀螺仪等加速度传感器，基于陀螺仪等加速度传感器测量的加速度，进行相应的计算，从而确定冰箱门体被打开的角度。但由于该方法容易出现加速度累计误差，导致获取的加速度传感器测量的加速度不准确，从而使后续确定的冰箱门体被打开的角度也会有角度误差。

技术实现思路

[0005]本申请提供了一种智能冰箱、冰箱门体被打开角度的确定及食材识别方法、装置、设备及介质，用以解决现有冰箱门体被打开的角度确定方法，确定的冰箱角度不够准确的问题。
[0006]第一方面，本申请提供了一种智能冰箱，所述智能冰箱包括：地磁传感器和处理器；
[0007]所述地磁传感器安装在所述智能冰箱的冰箱门体上，用于测量地磁在所述地磁传感器的当前位置的磁场强度在横轴方向的投影的横轴磁场强度，其中，所述横轴方向与地面平行，根据所述横轴磁场强度确定；
[0008]所述处理器，用于若所述冰箱门体被打开，则获取所述地磁传感器测量的横轴磁场强度，根据获取的所述横轴磁场强度与预先保存的地磁强度的第一比值，确定所述冰箱门体被打开的角度。
[0009]第二方面，本申请还提供了一种冰箱门体被打开角度的确定方法，所述冰箱门体上安装有地磁传感器，所述方法包括：
[0010]若所述冰箱门体被打开，则获取所述地磁传感器测量的地磁在所述地磁传感器的
当前位置的磁场强度在横轴方向的投影的横轴磁场强度，所述横轴方向与地面平行，根据所述横轴磁场强度确定；
[0011]根据所述横轴磁场强度与预先保存的地磁强度的第一比值，确定所述冰箱门体被打开的角度。
[0012]第三方面，本申请还提供了一种基于上述所述的冰箱门体被打开角度确定方法的食材识别方法，所述冰箱门体上安装有地磁传感器，所述方法包括：
[0013]若所述冰箱门体被打开，则获取所述冰箱门体的搁物架上的食材图像、并确定所述冰箱门体被打开的角度；
[0014]根据所述食材图像以及所述冰箱门体被打开的角度，对所述食材图像进行校准，获取校准后的食材图像；
[0015]通过食材识别模型，确定所述校准后的食材图像中包含的食材的种类。
[0016]第四方面，本申请还提供了一种冰箱门体被打开角度的确定装置，所述冰箱门体上安装有地磁传感器，所述装置包括：
[0017]获取单元，用于若所述冰箱门体被打开，则获取所述地磁传感器测量的地磁在所述地磁传感器的当前位置的磁场强度在横轴方向的投影的横轴磁场强度，所述横轴方向与地面平行，根据所述横轴磁场强度确定；
[0018]处理单元，用于根据所述横轴磁场强度与预先保存的地磁强度的第一比值，确定所述冰箱门体被打开的角度。
[0019]第五方面，本申请还提供了一种基于上述所述的冰箱门体被打开角度确定方法的食材识别装置，所述冰箱门体上安装有地磁传感器，所述装置包括：
[0020]获取单元，用于若所述冰箱门体被打开，则获取所述冰箱门体的搁物架上的食材图像、并确定所述冰箱门体被打开的角度；
[0021]校准单元，用于根据所述食材图像以及所述冰箱门体被打开的角度，对所述食材图像进行校准，获取校准后的食材图像；
[0022]处理单元，用于通过食材识别模型，确定所述校准后的食材图像中包含的食材的种类。
[0023]第六方面，本申请还提供了一种电子设备，所述电子设备至少包括处理器和存储器，所述处理器用于执行存储器中存储的计算机程序时实现如上述所述冰箱门体被打开角度的确定方法的步骤，以及实现如上述所述食材识别方法的步骤。
[0024]第七方面，本申请还提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述冰箱门体被打开角度的确定方法的步骤，以及实现如上述所述食材识别方法的步骤。
[0025]由于本申请在冰箱门体上安装地磁传感器，当处理器检测到冰箱门体被打开时，获取地磁传感器测量的地磁在地磁传感器的当前位置的磁场强度在横轴方向的投影的横轴磁场强度，后续基于该横轴磁场强度，确定冰箱门体被打开的角度，从而实现了基于地磁传感器测量的磁场强度，确定冰箱门体被打开的角度。
附图说明
[0026]为了更清楚地说明本申请的技术方案，下面将对实施例描述中所需要使用的附图
作简要介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0027]图1为本申请一些实施例提供的一种智能冰箱的结构示意图；
[0028]图2为本申请一些实施例提供的地磁强度与横轴磁场强度在地磁传感器的横轴与纵轴的坐标系中的示意图；
[0029]图3为本申请一些实施例提供的一种地磁传感器的安装位置的仰视图；
[0030]图4为本申请一些实施例提供的一种冰箱门体被打开角度示意图；
[0031]图5(a)-5(b)为本申请一些实施例提供的RM3100实测磁场强度变化示意图；
[0032]图6为本申请一些实施例提供的模拟冰箱门体转动时地磁传感器测量的磁场强度变化折线图；
[0033]图7为本申请一些实施例提供的一种智能冰箱结构示意图；
[0034]图8为本申请一些实施例提供的具体的智能冰箱基于冰箱门体被打开角度确定方法的食材识别过程示意图；
[0035]图9为本申请一些实施例提供的一种冰箱门体被打开角度确定过程示意图；
[0036]图10为本申请一些实施例提供的一种基于冰箱门体被打开角度确定方法的食材识别过程示意图；
[0037]图11为本申请一些实施例提供的一种冰箱门体被打开角度的确定装置的结构示意图；
[0038]图12为本申请一些实施例提供的一种基于冰箱门体被打开角本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种智能冰箱，其特征在于，所述智能冰箱包括：地磁传感器和处理器；所述地磁传感器安装在所述智能冰箱的冰箱门体上，用于测量地磁在所述地磁传感器的当前位置的磁场强度在横轴方向的投影的横轴磁场强度，其中，所述横轴方向与地面平行，根据所述横轴磁场强度确定；所述处理器，用于若所述冰箱门体被打开，则获取所述地磁传感器测量的横轴磁场强度，根据获取的所述横轴磁场强度与预先保存的地磁强度的第一比值，确定所述冰箱门体被打开的角度。2.根据权利要求1所述的智能冰箱，其特征在于，所述处理器，具体用于确定所述第一比值对应的角度；将所述角度作为所述冰箱门体被打开的角度。3.根据权利要求1所述的智能冰箱，其特征在于，所述处理器，还用于若接收到调整所述地磁传感器的横轴旋钮指向的触发操作，获取所述地磁传感器测量的所述地磁在所述地磁传感器在当前测量位置的磁场强度，在当前候选横轴方向的投影的横轴磁场强度；根据横轴磁场强度最大时所对应的候选横轴方向，确定所述横轴方向。4.根据权利要求1所述的智能冰箱，其特征在于，所述处理器，具体用于根据所述横轴磁场强度与预先保存的地磁强度的第一比值，以及所述磁场强度在纵轴方向上的投影的方向，确定修正角度；根据所述修正角度，及预设的参考角度，确定所述冰箱门体被打开的角度。5.根据权利要求4所述的智能冰箱，其特征在于，所述地磁传感器，还用于测量所述地磁的磁场强度在纵轴方向的投影的纵轴磁场强度；所述处理器，具体用于若所述冰箱门体被打开，则获取所述地磁传感器测量的纵轴磁场强度；若所述纵轴磁场强度及其对应的绝对值的第二比值为正值，确定所述磁场强度在纵轴方向上的投影的方向为所述纵轴的正方向；若所述横轴磁场强度及其对应的绝对值的第二比值为负值，确定所述磁场强度在纵...

【专利技术属性】
技术研发人员：谢飞学，曲磊，赵启东，高桢，李正义，高语函，孙菁，高雪松，
申请(专利权)人：青岛海信电子产业控股股份有限公司，
类型：发明
国别省市：