用于智能冰箱的图像处理装置、智能冰箱和智能头盔制造方法及图纸

本申请实施例公开了图像处理装置，包括：第一球形摄像头，设于冰箱箱体的内壁上，视野容纳冰箱门上所有物品，基于第一控制指令转动和/或拍摄图像；第二摄像头，设于冰箱门的内壁上，视野容纳冰箱箱体内所有物品，基于第二控制指令转动和/或拍摄图像；检测组件，检测冰箱门的开闭状态，并将检测的状态信号发送至控制中心；控制中心，响应于状态信号指示冰箱门在关闭过程中停留并且停留角度符合全景拍摄角度，向第一球形摄像头发送第一控制指令，并向第二球形摄像头发送第二控制指令，以及响应于所拍摄的待拼接图像均拍摄完整，确定已标记物品的全景图。该实施例降低了智能冰箱采集全景图像的成本，提高了智能冰箱的图像识别率。

Image processing device, refrigerator and helmet for smart refrigerator

【技术实现步骤摘要】
用于智能冰箱的图像处理装置、智能冰箱和智能头盔
本申请涉及物流
，具体涉及物流自动化
，尤其涉及用于智能冰箱的图像处理装置、智能冰箱和智能头盔。
技术介绍
随着物联网和各种传感器应用技术的高速发展，智能冰箱逐渐走进了人们的生活。目前智能冰箱的智能性大多集中在食物图像识别、在线购物、食物管理和大屏幕应用等方面。其中，图像识别是智能冰箱智能化的最重要功能之一。目前市面上的智能冰箱，其摄像设备采用固定位置和固定视角的摄像头，通过采用多个摄像头来拓宽拍摄范围，以便尽可能拍到冰箱内各个位置放置的食材。
技术实现思路
本申请实施例的目的在于提出一种用于智能冰箱的图像处理装置、智能冰箱和智能头盔。第一方面，本申请实施例提供了一种用于智能冰箱的图像处理装置，图像处理装置包括：第一球形摄像头，设于冰箱箱体的内壁上，视野容纳冰箱门上所有物品，接收控制中心的第一控制指令，根据第一控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像发送至控制中心，拍摄的图像包括第一全景图像的待拼接图像；第二球形摄像头，设于冰箱门的内壁上，视野容纳冰箱箱体内所有物品，接收控制中心的第二控制指令，根据第二控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像发送至控制中心，拍摄的图像包括第二全景图像的待拼接图像；检测组件，被配置成检测冰箱门的开闭状态，并将检测的状态信号发送至控制中心；控制中心，响应于状态信号指示冰箱门在关闭过程中停留并且停留角度符合全景拍摄角度，向第一球形摄像头发送第一控制指令，并向第二球形摄像头发送第二控制指令，以及基于均拍摄完整的第一全景图像的待拼接图像和第二全景图像的待拼接图像，在本地或云端服务器确定已标记物品的全景图。在一些实施例中，控制中心进一步被配置成：响应于状态信号指示冰箱门在关闭过程中停留且停留角度符合全景拍摄角度，经由第一控制指令指示第一球形摄像头拍摄第一定位图像；根据第一定位图像，经由第一控制指令调整第一摄像头的视角，使得第一摄像头所拍摄的物品位于第一摄像头所拍摄的图像的预定位置；以及经由第二控制指令指示第二球形摄像头拍摄第二定位图像；根据第二定位图像，经由第二控制指令调整第二摄像头的视角，使得第二摄像头所拍摄的物品位于第二摄像头所拍摄的图像的预设位置。在一些实施例中，控制中心进一步被配置成：经由第一控制指令，指示第一球形摄像头由预定位置向左旋转至视野中出现冰箱门的左边缘，从左向右旋转并持续拍摄图像直至拍摄到冰箱门的右边缘，回复至预定位置，由预定位置向上旋转至视野中出现冰箱门的上边缘，由上向下旋转并持续拍摄图像直至拍摄到冰箱门的下边缘，得到第一全景图像的待拼接图像；以及经由第二控制指令，指示第二球形摄像头由预设位置向左旋转至视野中出现冰箱箱体的左边缘，从左向右旋转并持续拍摄图像直至拍摄到冰箱箱体的右边缘，回复至预设位置，由预设位置向上旋转至视野中出现冰箱箱体上的上边缘，由上向下旋转并持续拍摄图像直至拍摄到冰箱箱体的下边缘，得到第二全景图像的待拼接图像。在一些实施例中，图像处理装置还包括：云端服务器，被配置成接收第一全景图像的待拼接图像和第二全景图像的待拼接图像，拼接所接收的待拼接图像，得到包含冰箱内所有物品的全景图，识别并标记全景图中的物品，得到已标记物品的全景图。在一些实施例中，云端服务器进一步被配置成：将已标记物品的全景图下发至控制中心。在一些实施例中，控制中心进一步被配置成：响应于状态信号指示冰箱门在关闭过程中且当前角度符合定点拍摄角度，指示第一球形摄像头旋转至默认位置并拍摄第一定点图像，指示第二球形摄像头旋转至预置位置并拍摄第二定点图像，响应于冰箱门关闭且第一全景图像的待拼接图像或第二全景图像的待拼接图像未拍摄完整，将第一定点图像和第二定点图像上传至云端服务器。在一些实施例中，云端服务器进一步被配置成：接收第一定点图像和第二定点图像，分别识别并标记第一定点图像和第二定点图像中的物品，得到已标记物品的第一定点图像和已标记物品的第二定点图像。在一些实施例中，云端服务器进一步被配置成：将已标记物品的第一定点图像和已标记物品的第二定点图像下发至控制中心。第二方面，本申请实施例提供了一种智能冰箱，包括：如上述任意一项实施例的用于智能冰箱的图像处理装置。第三方面，本申请实施例提供了一种用于如上述实施例的智能冰箱的智能头盔，包括：陀螺仪，被配置成检测用户的头部动作，将检测的头部动作信息发送至智能芯片；智能芯片，被配置成从智能冰箱中读取以下至少一项：已标记物品的全景图、已标记物品的第一定点图像以及已标记物品的第二定点图像；基于读取的图像，确定对应头部动作信息的虚拟图像，将虚拟图像发送至显示组件；显示组件，被配置成向用户呈现虚拟图像。本申请上述实施例提供的用于智能冰箱的图像处理装置、智能冰箱和智能头盔，通过在图像处理装置中设置第一球形摄像头，设于冰箱箱体的内壁上，视野容纳冰箱门上所有物品，接收控制中心的第一控制指令，根据第一控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的第一全景图像的待拼接图像发送至控制中心；设置第二摄像头，设于冰箱门的内壁上，视野容纳冰箱箱体内所有物品，接收控制中心的第二控制指令，根据第二控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的第二全景图像的待拼接图像发送至控制中心；设置检测组件，被配置成检测冰箱门的开闭状态，并将检测的状态信号发送至控制中心；以及设置控制中心，响应于状态信号指示冰箱门在关闭过程中停留并且停留角度符合全景拍摄角度，向第一球形摄像头发送第一控制指令，并向第二球形摄像头发送第二控制指令，以及基于均拍摄完整的第一全景图像的待拼接图像和第二全景图像的待拼接图像，在本地或云端服务器确定已标记物品的全景图，减少了拍照所用的摄像头，降低了智能冰箱采集全景图像的成本，并且由于全景图像减少了拍照死角，因此提高了智能冰箱的图像识别率。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1示出了根据本申请实施例的用于智能冰箱的图像处理装置的一个实施例的示例性结构图；图2示出了根据本申请实施例的用于智能冰箱的图像处理装置的另一个实施例的示例性结构图；图3示出了根据本申请实施例的用于智能冰箱的图像处理装置的示例性应用场景；图4示出了根据本申请实施例的用于智能冰箱的智能头盔的示例性结构图。具体实施方式下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关专利技术相关的部分。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。本领域技术人员还将理解的是，虽然本文中可使用用语“第一”、“第二”等来描述各种球形摄像头、控制指令、定位图像、全景图像、定点图像、拍摄位置等，但是这些球形摄像头、控制指令、定位图像、全景图像、定点图像、拍摄位置不应被这些用语限制。这些用语仅用于将一个球形摄像头、控制指令、定位图像、全景图像、定点图像与其它球形摄像头、控制指令、定位图像、全景图像、定点图像、拍摄位置区分开。如图1所示，本申请实施例的用本文档来自技高网...

【技术保护点】
1.一种用于智能冰箱的图像处理装置，所述图像处理装置包括：第一球形摄像头，设于冰箱箱体的内壁上，视野容纳冰箱门上所有物品，接收控制中心的第一控制指令，根据第一控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像的待拼接图像发送至所述控制中心，所述拍摄的图像包括第一全景图像的待拼接图像；第二球形摄像头，设于冰箱门的内壁上，视野容纳所述冰箱箱体内所有物品，接收所述控制中心的第二控制指令，根据所述第二控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像发送至所述控制中心，所述拍摄的图像包括第二全景图像的待拼接图像；检测组件，被配置成检测冰箱门的开闭状态，并将检测的状态信号发送至所述控制中心；所述控制中心，响应于所述状态信号指示所述冰箱门在关闭过程中停留并且停留角度符合全景拍摄角度，向所述第一球形摄像头发送所述第一控制指令，并向所述第二球形摄像头发送所述第二控制指令，以及基于均拍摄完整的所述第一全景图像的待拼接图像和所述第二全景图像的待拼接图像，在本地或云端服务器确定已标记物品的全景图。

【技术特征摘要】
1.一种用于智能冰箱的图像处理装置，所述图像处理装置包括：第一球形摄像头，设于冰箱箱体的内壁上，视野容纳冰箱门上所有物品，接收控制中心的第一控制指令，根据第一控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像的待拼接图像发送至所述控制中心，所述拍摄的图像包括第一全景图像的待拼接图像；第二球形摄像头，设于冰箱门的内壁上，视野容纳所述冰箱箱体内所有物品，接收所述控制中心的第二控制指令，根据所述第二控制指令转动和/或拍摄图像，并将转动结果和/或拍摄的图像发送至所述控制中心，所述拍摄的图像包括第二全景图像的待拼接图像；检测组件，被配置成检测冰箱门的开闭状态，并将检测的状态信号发送至所述控制中心；所述控制中心，响应于所述状态信号指示所述冰箱门在关闭过程中停留并且停留角度符合全景拍摄角度，向所述第一球形摄像头发送所述第一控制指令，并向所述第二球形摄像头发送所述第二控制指令，以及基于均拍摄完整的所述第一全景图像的待拼接图像和所述第二全景图像的待拼接图像，在本地或云端服务器确定已标记物品的全景图。2.根据权利要求1所述的图像处理装置，其中，所述控制中心进一步被配置成：响应于所述状态信号指示所述冰箱门在关闭过程中停留且停留角度符合全景拍摄角度，经由所述第一控制指令指示所述第一球形摄像头拍摄第一定位图像；根据所述第一定位图像，经由所述第一控制指令调整所述第一摄像头的视角，使得所述第一摄像头所拍摄的物品位于所述第一摄像头所拍摄的图像的预定位置；以及经由所述第二控制指令指示所述第二球形摄像头拍摄第二定位图像，根据所述第二定位图像；经由所述第二控制指令调整所述第二摄像头的视角，使得所述第二摄像头所拍摄的物品位于所述第二摄像头所拍摄的图像的预设位置。3.根据权利要求2所述的图像处理装置，其中，所述控制中心进一步被配置成：经由所述第一控制指令，指示所述第一球形摄像头由所述预定位置向左旋转至视野中出现所述冰箱门的左边缘，从左向右旋转并持续拍摄图像直至拍摄到所述冰箱门的右边缘，回复至所述预定位置，由所述预定位置向上旋转至视野中出现所述冰箱门的上边缘，由上向下旋转并持续拍摄图像直至拍摄到所述冰箱门的下边缘，得到所述第一全景图像的待拼接图像；以及经由所述第二控制指令，指示所述第二球形摄像头由所述预设位置向左...

【专利技术属性】
技术研发人员：刘新宇，王恩杰，李鲁，
申请(专利权)人：北京京东尚科信息技术有限公司，北京京东世纪贸易有限公司，
类型：发明
国别省市：北京,11