基于AR技术的人工辅助方法、装置、系统和上位机制造方法及图纸

本发明专利技术公开了一种基于AR技术的人工辅助方法、装置、系统和上位机，涉及自动化仓储领域。其中的方法包括AR成像设备将获取的托盘图像信息发送至上位机；上位机根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面；AR成像设备将上位机发送的物品位于托盘的码放位置的叠加画面呈现给用户，以便用户根据AR成像设备呈现的叠加画面在托盘的码放位置码垛物品。本发明专利技术能够解决码垛位置不准确的问题。

【技术实现步骤摘要】
基于AR技术的人工辅助方法、装置、系统和上位机
本专利技术涉及自动化仓储领域，尤其涉及一种基于AR技术的人工辅助方法、装置、系统和上位机。
技术介绍
随着AS/RS(AutomatedStorageandRetrievalSystem，自动存取系统)自动立体库大量应用，商品在入库时都是以托盘为存储单位，通过堆垛机存储到货架上的。那么在入库端对码托盘就有一定的需求。目前比较成熟的码垛方案是通过机器人进行码垛，受限于码垛机器人价格昂贵并没有大量使用，由其对于促销期间的大量入库，机器人可能无法满足需求，会出现人工参与码垛作为补充，但人工码垛的特点就是垛码的垛型不标准也不可控。
技术实现思路
本专利技术要解决的一个技术问题是提供一种基于AR技术的人工辅助方法、装置、系统和上位机解决码垛位置不准确的问题。根据本专利技术一方面，提出一种基于增强现实AR技术的人工辅助方法，包括：AR成像设备将获取的托盘图像信息发送至上位机；上位机根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面；AR成像设备将上位机发送的物品位于托盘的码放位置的叠加画面呈现给用户，以便用户根据AR成像设备呈现的叠加画面在托盘的码放位置码垛物品。进一步地，该方法还包括：AR成像设备向上位机发送AR成像设备的位置信息；上位机根据AR成像设备的位置信息以及托盘图像信息对AR成像设备进行姿态评估，确定AR成像设备相对于托盘的方位指向。进一步地，上位机根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面包括：上位机接收条形码扫描设备BCR发送的物品条形码，根据物品条形码识别物品，生成物品的虚拟影像；根据AR成像设备相对于托盘的方位指向以及物品在托盘的码放位置，将物品的虚拟影像渲染到托盘的码放位置上形成叠加画面。进一步地，该方法还包括：上位机接收BCR发送的物品的计数编号以及体积测量装置发送的物品的尺寸信息；根据托盘的图像信息以及物品的计数编号和尺寸信息确定物品在托盘的码放位置。进一步地，该方法还包括：AR成像设备接收上位机发送的码垛上限信息，以便提醒用户结束码垛物品。根据本专利技术的另一方面，还提出一种基于增强现实AR技术的人工辅助装置，包括：托盘图像发送单元，将获取的托盘图像信息发送至上位机，以便上位机根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面；叠加图面接收单元，用于接收上位机发送的物品位于托盘的码放位置的叠加画面；叠加画面呈现单元，用于向用户呈现叠加画面，以便用户根据AR成像设备呈现的叠加画面在托盘的码放位置码垛物品。进一步地，该装置还包括位置信息发送单元；位置信息发送单元向上位机发送AR成像设备的位置信息，以便上位机根据AR成像设备的位置信息以及托盘图像信息对AR成像设备进行姿态评估，确定AR成像设备相对于托盘的方位指向，根据AR成像设备相对于托盘的方位指向以及物品在托盘的码放位置，将物品的虚拟影像渲染到托盘的码放位置上形成叠加画面。进一步地，该装置还包括信息提醒单元；信息提醒单元用于接收上位机发送的码垛上限信息，以便提醒用户结束码垛物品。根据本专利技术的另一方面，还提出一种上位机，包括：托盘图像接收单元，用于接收AR成像设备获取的托盘图像信息；叠加画面生成单元，用于根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面；叠加画面发送单元，用于向AR成像设备发送物品位于托盘的码放位置的叠加画面，以便用户通过AR成像设备呈现的叠加画面在托盘的码放位置码垛物品。进一步地，该上位机还包括位置信息接收单元和姿态评估单元；位置信息接收单元用于接收AR成像设备发送的AR成像设备的位置信息；姿态评估单元用于根据AR成像设备的位置信息以及托盘图像信息对AR成像设备进行姿态评估，确定AR成像设备相对于托盘的方位指向。进一步地，该上位机还包括条形码扫描设备BCR信息接收单元和虚拟影像生成单元；BCR信息接收单元用于接收BCR发送的物品条形码；虚拟影像生成单元用于根据物品条形码识别物品，生成物品的虚拟影像；叠加画面生成单元用于根据AR成像设备相对于托盘的方位指向以及物品在托盘的码放位置，将物品的虚拟影像渲染到托盘的码放位置上形成叠加画面。进一步地，该上位机还包括物品体积接收单元和码放位置确定单元；BCR信息接收单元用于接收BCR发送的物品的计数编号；物品体积接收单元用于接收体积测量装置发送的物品的尺寸信息；码放位置确定单元用于根据托盘的图像信息以及物品的计数编号和尺寸信息确定物品在托盘的码放位置。进一步地，该上位机还包括上限信息发送单元；上限信息发送单元用于向AR成像设备发送码垛上限信息，以便通过AR成像设备提醒用户结束码垛物品。根据本专利技术的另一方面，还提出一种基于增强现实AR技术的人工辅助系统，包括上述的基于AR技术的人工辅助装置和上述的上位机。根据本专利技术的另一方面，还提出一种基于增强现实AR技术的人工辅助系统，包括：存储器；以及耦接至存储器的处理器，处理器被配置为基于存储在存储器的指令执行如上述的方法。根据本专利技术的另一方面，还提出一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现上述的方法的步骤。与现有技术相比，本专利技术AR成像设备将获取的托盘图像信息发送至上位机，以便上位机根据物品在托盘的码放位置生成物品位于托盘的码放位置的叠加画面；AR成像设备将上位机发送的物品位于托盘的码放位置的叠加画面呈现给用户，以便用户在托盘的码放位置码垛物品，使得物品码垛更整齐，能够解决码垛位置不准确的问题。通过以下参照附图对本专利技术的示例性实施例的详细描述，本专利技术的其它特征及其优点将会变得清楚。附图说明构成说明书的一部分的附图描述了本专利技术的实施例，并且连同说明书一起用于解释本专利技术的原理。参照附图，根据下面的详细描述，可以更加清楚地理解本专利技术，其中：图1为本专利技术基于AR技术的人工辅助方法的一个实施例的流程示意图。图2为本专利技术基于AR技术的人工辅助方法的另一个实施例的流程示意图。图3为本专利技术基于AR技术的人工辅助方法的再一个实施例的流程示意图。图4为本专利技术应用场景的示意图。图5A为用户通过AR眼镜看到的在托盘的码放位置上的物品虚拟影像示意图。图5B为用户通过AR眼镜看到的在托盘的码放位置上的物品虚拟影像另一个示意图。图6为本专利技术基于AR技术的人工辅助装置的一个实施例的结构示意图。图7为本专利技术基于AR技术的人工辅助装置的另一个实施例的结构示意图。图8为本专利技术上位机的一个实施例的结构示意图。图9为本专利技术上位机的另一个实施例的结构示意图。图10为本专利技术基于AR技术的人工辅助系统的一个实施例的结构示意图。图11为本专利技术基于AR技术的人工辅助系统的再一个实施例的结构示意图。图12为本专利技术基于AR技术的人工辅助系统的又一个实施例的结构示意图。具体实施方式现在将参照附图来详细描述本专利技术的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本专利技术的范围。同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本专利技术及其应用或使用的任何限制。对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨本文档来自技高网...

【技术保护点】
一种基于增强现实AR技术的人工辅助方法，其特征在于，包括：AR成像设备将获取的托盘图像信息发送至上位机；所述上位机根据物品在所述托盘的码放位置生成所述物品位于所述托盘的所述码放位置的叠加画面；所述AR成像设备将所述上位机发送的所述物品位于所述托盘的所述码放位置的叠加画面呈现给用户，以便所述用户根据所述AR成像设备呈现的所述叠加画面在所述托盘的所述码放位置码垛所述物品。

【技术特征摘要】
1.一种基于增强现实AR技术的人工辅助方法，其特征在于，包括：AR成像设备将获取的托盘图像信息发送至上位机；所述上位机根据物品在所述托盘的码放位置生成所述物品位于所述托盘的所述码放位置的叠加画面；所述AR成像设备将所述上位机发送的所述物品位于所述托盘的所述码放位置的叠加画面呈现给用户，以便所述用户根据所述AR成像设备呈现的所述叠加画面在所述托盘的所述码放位置码垛所述物品。2.根据权利要求1所述的方法，其特征在于，还包括：所述AR成像设备向所述上位机发送所述AR成像设备的位置信息；所述上位机根据所述AR成像设备的位置信息以及所述托盘图像信息对所述AR成像设备进行姿态评估，确定所述AR成像设备相对于所述托盘的方位指向。3.根据权利要求2所述的方法，其特征在于，所述上位机根据物品在所述托盘的码放位置生成所述物品位于所述托盘的所述码放位置的叠加画面包括：所述上位机接收条形码扫描设备BCR发送的物品条形码，根据所述物品条形码识别所述物品，生成所述物品的虚拟影像；根据所述AR成像设备相对于所述托盘的方位指向以及所述物品在所述托盘的码放位置，将所述物品的虚拟影像渲染到所述托盘的码放位置上形成所述叠加画面。4.根据权利要求3所述的方法，其特征在于，还包括：所述上位机接收所述BCR发送的所述物品的计数编号以及体积测量装置发送的所述物品的尺寸信息；根据所述托盘的图像信息以及所述物品的计数编号和尺寸信息确定所述物品在所述托盘的码放位置。5.根据权利要求1-4任一所述的方法，其特征在于，还包括：所述AR成像设备接收所述上位机发送的码垛上限信息，以便提醒所述用户结束码垛所述物品。6.一种基于增强现实AR技术的人工辅助装置，其特征在于，包括：托盘图像发送单元，将获取的托盘图像信息发送至上位机，以便所述上位机根据物品在所述托盘的码放位置生成所述物品位于所述托盘的所述码放位置的叠加画面；叠加图面接收单元，用于接收所述上位机发送的所述物品位于所述托盘的所述码放位置的叠加画面；叠加画面呈现单元，用于向用户呈现所述叠加画面，以便所述用户根据所述AR成像设备呈现的所述叠加画面在所述托盘的所述码放位置码垛所述物品。7.根据权利要求6所述的装置，其特征在于，还包括位置信息发送单元；所述位置信息发送单元向所述上位机发送所述AR成像设备的位置信息，以便所述上位机根据所述AR成像设备的位置信息以及所述托盘图像信息对所述AR成像设备进行姿态评估，确定所述AR成像设备相对于所述托盘的方位指向，根据所述AR成像设备相对于所述托盘的方位指向以及所述物品在所述托盘的码放位置，将所述物品的虚拟影像渲染到所述托盘的码放位置上形成所述叠加画面。8....

【专利技术属性】
技术研发人员：胡金星，
申请(专利权)人：北京京东尚科信息技术有限公司，北京京东世纪贸易有限公司，
类型：发明
国别省市：北京,11