一种机器人作业数据处理系统、方法、装置、设备及介质制造方法及图纸

本申请公开了一种机器人作业数据处理系统、方法、装置、设备及介质，应用于机器人技术领域，具体为：获取各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据；基于各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据，对初始数据清洗模型进行训练得到目标数据清洗模型；基于目标数据清洗模型，对各个第二机器人在第二时间段的原始机器人作业数据进行数据清洗，得到各个第二机器人在第二时间段的标准机器人作业数据，从而通过结合机器学习技术，实现了大数据分析和数据准确清洗，进而提高了数据清洗效率和准确度。数据清洗效率和准确度。数据清洗效率和准确度。

【技术实现步骤摘要】
一种机器人作业数据处理系统、方法、装置、设备及介质


[0001]本申请涉及机器人
，尤其涉及一种机器人作业数据处理系统、方法、装置、设备及介质。

技术介绍

[0002]目前，智能自动化已经渗入日常生活、工业生产的方方面面，机器人已经在很多场合代替人工从事一些繁重的工作，例如带电作业机器人等工业机器人、扫地机器人等家用机器人，从而给日常生活、工业生产等方方面面带来了极大便利，提高了日常生活和工业生产的品质和效率。
[0003]随着机器人不断作业，机器人作业数据的规模变得庞大，机器人作业数据的数据量叠加造成了机器人作业数据中存在大量重复数据、无用数据、异常数据、缺失数据和不一致数据等非清洁数据，从而给机器人作业数据的应用带来不便，因此对机器人作业数据进行清洗是机器人
至关重要的步骤，然而现有的数据清洗方式多采用人工方式，从而导致数据清洗的效率较低、效果也较差。

技术实现思路

[0004]本申请提供了一种机器人作业数据处理系统、方法、装置、设备及介质，具体的，本申请提供的技术方案如下：一方面，本申请提供了一种机器人作业数据处理系统，包括数据获取系统、模型训练系统和数据清洗系统；数据获取系统分别与模型训练系统和数据清洗系统通信连接，模型训练系统和数据清洗系统通信连接；数据获取系统，用于获取各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据；模型训练系统，用于基于各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据，对初始数据清洗模型进行训练得到目标数据清洗模型；数据清洗系统，用于基于目标数据清洗模型，对各个第二机器人在第二时间段的原始机器人作业数据进行数据清洗，得到各个第二机器人在第二时间段的标准机器人作业数据。
[0005]另一方面，本申请提供了一种机器人作业数据处理方法，包括：获取各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据；基于各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据，对初始数据清洗模型进行训练得到目标数据清洗模型；基于目标数据清洗模型，对各个第二机器人在第二时间段的原始机器人作业数据进行数据清洗，得到各个第二机器人在第二时间段的标准机器人作业数据。
[0006]另一方面，本申请还提供了一种机器人作业数据处理装置，包括：数据获取单元，用于获取各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据；模型训练单元，用于基于各个第一机器人在第一时间段的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据，对初始数据清洗模型进行训练得到目标数据清洗模型；模型应用单元，用于基于目标数据清洗模型，对各个第二机器人在第二时间段的原始机器人作业数据进行数据清洗，得到各个第二机器人在第二时间段的标准机器人作业数据。
[0007]另一方面，本申请还提供了一种电子设备，包括存储器、处理器和存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述机器人作业数据处理方法。
[0008]另一方面，本申请还提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机指令，该计算机指令被处理器执行时实现上述机器人作业数据处理方法。
[0009]本申请的有益效果如下：本申请通过将不同机器人的机器人作业数据作为不同数据源融合在一起并结合机器学习技术，可以实现大数据分析和数据准确清洗，从而可以提高数据清洗效率和准确度。
[0010]本申请的其它特征和优点将在随后的说明书中阐述，并且，部分地可以从说明书中变得显而易见，或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中特别指出的结构来实现和获得。
附图说明
[0011]此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：图1为本申请实施例中机器人作业数据处理系统组成架构示意图；图2为本申请实施例中机器人作业数据处理方法的一流程示意图；图3为本申请实施例中机器人作业数据处理方法的另一流程示意图；图4为本申请实施例中基于初始数据清洗模型的数据清洗过程示意图；图5为本申请实施例中基于目标数据清洗模型的数据清洗过程示意图；图6为本申请实施例中机器人作业数据处理装置的功能结构示意图；图7为本申请实施例中电子设备的硬件结构示意图。
具体实施方式
[0012]为了使本申请的目的、技术方案及有益效果更加清楚明白，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，并不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0013]为便于本领域技术人员更好地理解本申请，下面先对本申请涉及的技术用语进行简单介绍。
[0014]机器学习，是基于样本数据设计、学习、调整和优化系统的一种方法。本申请可基于各个机器人的历史机器人作业数据以及历史机器人作业数据的标注机器人作业数据，对机器人作业数据清洗方案进行机器学习，并在机器学习过程中对初始数据清洗模型的机器人作业数据清洗方案进行优化调整以获得性能和准确性较高的目标数据清洗模型。
[0015]数据挖掘，是从大量数据中通过算法搜索隐藏于其中的信息的过程。本申请可在机器学习过程中从大量的历史机器人作业数据和标注机器人作业数据中搜索隐藏于其中的机器人作业数据清洗方案的过程。
[0016]分布式文件系统，是将大量数据存储在多个设备上以降低大量数据存储成本和复杂度的文件系统。本申请可通过分布式文件系统存储机器学习过程中使用的历史机器人作业数据和标注机器人作业数据以及数据清洗过程中清洗好的标准机器人作业数据。
[0017]ETL（Extract Transform Load，提取转换加载），是将数据从来源端经过提取、转换、加载至数据仓库的过程。本申请可通过提取原始机器人作业数据，通过清洗和/或丰富规则，将原始机器人作业数据转换为适合使用的标准机器人作业数据，并且将标准机器人作业数据加载到mysql、redis、mongo等合适的数据库中供数据应用系统使用。
[0018]Flink，是在集群环境中运行以对无界和有界数据流进行有状态计算的分布式处理引擎。本申请可通过Flink对机器人作业数据进行机器学习、数据挖掘、数据清洗和数据存储等处理。
[0019]Kafka，是基于zookeeper协调的用于web/nginx日志、访问日志、消息服务等的分布式日志系统，也可作为MQ（Message Queue，消息队列）系统。本申请可通过Kafka进行机器人作业数据的数据传输和日志记录等。
[0020]HDFS，是具有高容错性、高吞吐量的分布式文件系统。本本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种机器人作业数据处理系统，其特征在于，包括数据获取系统、模型训练系统和数据清洗系统；所述数据获取系统分别与所述模型训练系统和所述数据清洗系统通信连接，所述模型训练系统和所述数据清洗系统通信连接；所述数据获取系统，用于获取各个第一机器人在第一时间段的历史机器人作业数据以及所述历史机器人作业数据的标注机器人作业数据；所述模型训练系统，用于基于所述各个第一机器人在所述第一时间段的所述历史机器人作业数据以及所述历史机器人作业数据的标注机器人作业数据，对初始数据清洗模型进行训练得到目标数据清洗模型；所述数据清洗系统，用于基于所述目标数据清洗模型，对各个第二机器人在第二时间段的原始机器人作业数据进行数据清洗，得到所述各个第二机器人在第二时间段的标准机器人作业数据。2.如权利要求1所述的机器人作业数据处理系统，其特征在于，还包括数据存储系统；所述数据存储系统与所述数据清洗系统通信连接；所述数据清洗系统，还用于将所述各个第二机器人在第二时间段的标准机器人作业数据发送至所述数据存储系统；所述数据存储系统，用于将所述各个第二机器人在第二时间段的标准机器人作业数据按照标准数据格式存储至目标数据库。3.如权利要求1所述的机器人作业数据处理系统，其特征在于，还包括数据验证系统和数据存储系统；所述数据验证系统分别与所述数据清洗系统和所述数据存储系统通信连接；所述数据清洗系统，还用于将所述各个第二机器人在第二时间段的标准机器人作业数据发送至所述数据验证系统；所述数据验证系统，用于对所述各个第二机器人在第二时间段的标准机器人作业数据是否符合标准条件进行验证；确定所述各个第二机器人在第二时间段的标准机器人作业数据符合所述标准条件时，将所述各个第二机器人在第二时间段的标准机器人作业数据发送至所述数据存储系统；确定所述各个第二机器人在第二时间段的标准机器人作业数据不符合所述标准条件时，将所述各个第二机器人在第二时间段的标准机器人作业数据确定为原始机器人作业数据发送至所述数据清洗系统；所述数据存储系统，用于将所述各个第二机器人在第二时间段的标准机器人作业数据按照标准数据格式存储至目标数据库。4.如权利要求1
‑
3任一项所述的机器人作业数据处理系统，其特征在于，所述数据清洗系统，用于基于所述目标数据清洗模型，对所述原始机器人作业数据进行分析，得到所述原始机器人作业数据的数据类型后，基于所述原始机器人作业数据的数据类型，确定所述原始机器人作业数据的数据清洗方案，并对所述原始机器人作业数据进行质量检测，得到所述原始机器人作业数据的非清洁数据后，对所述原始机器人作业数据的非清洁数据进行定位得到所述原始机器人作业数据的非清洁数据类型，以及基于所述原始机器人作业数据的数据清洗方案中所述非清洁数据类型对应的数据清洗方案，对所述原始机器人作业数据进行数据清洗得到所述原始机器人作业数据的标准机器人作业数据。5.一种机器人作业数据处理方法，其特征在于，包括：
获取各个第一机器人在第一时间段的历史机器人作业数据以及所述历史机器人作业数据的标注机器人作业数据；基于所述各个第一机器人在...

【专利技术属性】
技术研发人员：王跃东，李帅，任青亭，李俊强，孙楠楠，董文旭，
申请(专利权)人：国网瑞嘉天津智能机器人有限公司，
类型：发明
国别省市：