基于RPA和AI的数据汇聚方法、装置、设备及存储介质制造方法及图纸

本申请提出一种基于RPA和AI的数据汇聚方法、装置、设备及存储介质，其中，该方法包括：获取大数据平台中各主题库分别对应的数据资源目录；基于机器人流程自动化RPA，根据每个主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据；对每个主题库对应的第一业务数据进行数据治理，以获取每个主题库对应的第二业务数据；将每个主题库对应的第二业务数据推送给大数据平台。该方法通过RPA可以从各业务系统中获取构建主题库所需的数据，实现了全量数据采集，而且实现了全流程的自动化。的自动化。的自动化。

【技术实现步骤摘要】
基于RPA和AI的数据汇聚方法、装置、设备及存储介质


[0001]本申请涉及数据处理
，尤其涉及一种基于RPA和AI的数据汇聚方法、装置、设备及存储介质。

技术介绍

[0002]机器人流程自动化(Robotic Process Automation，简称：RPA)是一种新型的人工智能的虚拟流程自动化机器人，用于模拟人在计算机上的操作，按规则自动执行流程任务，RPA可以广泛应用于各个需要流程自动化的领域，例如大数据平台数据汇聚。
[0003]人工智能(Artificial Intelligence，AI)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门技术科学。
[0004]在大数据平台数据汇聚，通常采用库表对接、接口等方式进行数据汇聚。但是，由于各单位业务系统主要为国垂、省垂系统，通常本地没有数据库，导致大多数业务系统数据无法采集。

技术实现思路

[0005]本申请提供一种基于RPA和AI的数据汇聚方法、装置、设备及存储介质。具体技术方案如下：
[0006]本申请一方面实施例，提供一种基于RPA和AI的数据汇聚方法，包括：
[0007]获取大数据平台中各主题库分别对应的数据资源目录；
[0008]基于机器人流程自动化RPA，根据每个所述主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据；
[0009]对每个所述主题库对应的第一业务数据进行数据治理，以获取每个所述主题库对应的第二业务数据；
[0010]将每个所述主题库对应的第二业务数据推送给所述大数据平台。
[0011]在本申请一方面实施例一种可能的实现方式中，每个所述主题库对应的数据资源目录包括目标业务系统及每个所述主题库包含的各属性项，所述根据每个所述主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据，包括：
[0012]根据每个所述主题库包含的各属性项，从所述目标业务系统中获取所述第一业务数据，其中，所述第一业务数据包括所述各属性项对应的属性值。
[0013]在本申请一方面实施例一种可能的实现方式中，所述目标业务系统为多个，所述根据每个所述主题库包含的各属性项，从所述目标业务系统中获取所述第一业务数据，包括：
[0014]根据每个所述主题库包含的各属性项，从每个目标业务系统中获取至少一个属性项对应的属性值。
[0015]在本申请一方面实施例一种可能的实现方式中，其中，每个所述主题库对应的数据资源目录还包括每个属性项对应的数据格式，所述对每个所述主题库对应的第一业务数
据进行数据治理，以获取每个所述主题库对应的第二业务数据，包括：
[0016]基于自然语言处理NLP，将每个属性项对应的属性值的数据格式与所述目标数据格式进行匹配；
[0017]在任一属性值的数据格式与所述目标数据格式不匹配的情况下，对所述任一属性值进行处理，以使所述任一属性值的数据格式为所述目标数据格式。
[0018]在本申请一方面实施例一种可能的实现方式中，所述数据资源目录中包括各属性项的顺序，所述将每个所述主题库对应第二业务数据推送给所述大数据平台，包括：
[0019]根据每个主题库对应的各属性项的顺序，将各属性项对应的属性值进行整合；
[0020]将整合后的所述第二业务数据推送给大数据平台。
[0021]在本申请一方面实施例一种可能的实现方式中，所述将每个所述主题库对应的第二数据推送给所述大数据平台，包括：
[0022]通过所述大数据平台的接口，将每个所述主题库对应的第二业务数据推送给所述大数据平台；或者，
[0023]将每个所述主题库对应的第二业务数据写入所述大数据平台的数据库。
[0024]本申请另一方面实施例，提供一种基于RPA和AI的数据汇聚装置，包括：
[0025]第一获取模块，用于获取大数据平台中各主题库分别对应的数据资源目录；
[0026]第二获取模块，用于基于机器人流程自动化RPA，根据每个所述主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据；
[0027]第三获取模块，用于对每个所述主题库对应的第一业务数据进行数据治理，以获取每个所述主题库对应的第二业务数据；
[0028]推送模块，用于将每个所述主题库对应的第二业务数据推送给所述大数据平台。
[0029]在本申请另一方面实施例一种可能的实现方式中，每个所述主题库对应的数据资源目录包括目标业务系统及每个所述主题库包含的各属性项，所述第二获取模块，用于：
[0030]根据每个所述主题库包含的各属性项，从所述目标业务系统中获取所述第一业务数据，其中，所述第一业务数据包括所述各属性项对应的属性值。
[0031]在本申请另一方面实施例一种可能的实现方式中，所述目标业务系统为多个，所述第二获取模块，用于：
[0032]根据每个所述主题库包含的各属性项，从每个目标业务系统中获取至少一个属性项对应的属性值。
[0033]在本申请另一方面实施例一种可能的实现方式中，每个所述主题库对应的数据资源目录还包括每个属性项对应的数据格式，所述第二获取模块，用于：
[0034]基于自然语言处理NLP，将每个属性项对应的属性值的数据格式与所述目标数据格式进行匹配；
[0035]在任一属性值的数据格式与所述目标数据格式不匹配的情况下，对所述任一属性值进行处理，以使所述任一属性值的数据格式为所述目标数据格式。
[0036]在本申请另一方面实施例一种可能的实现方式中，所述数据资源目录中包括各属性项的顺序，所述推送模块，用于：
[0037]根据每个主题库对应的各属性项的顺序，将各属性项对应的属性值进行整合；
[0038]将整合后的所述第二业务数据推送给大数据平台。
[0039]在本申请另一方面实施例一种可能的实现方式中，所述推送模块，用于：
[0040]通过所述大数据平台的接口，将每个所述主题库对应的第二业务数据推送给所述大数据平台；或者，
[0041]将每个所述主题库对应的第二业务数据写入所述大数据平台的数据库。本申请另一方面实施例，提供一种计算设备，所述计算设备包括：
[0042]存储有可执行程序代码的存储器；
[0043]与存储器耦合的处理器；
[0044]其中，处理器调用存储器中存储的可执行程序代码，执行如上述一方面实施例所述的基于RPA和AI的数据汇聚方法。
[0045]本申请另一方面实施例，提供一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如上述一方面实施例所述的基于RPA和AI的数据汇聚方法。
[0046]本申请另一方面实施例，提供一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据上述一方面实施例所述的基于RPA和AI的数据汇聚方法。
[0047]本申请实本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于RPA和AI的数据汇聚方法，其特征在于，包括：获取大数据平台中各主题库分别对应的数据资源目录；基于机器人流程自动化RPA，根据每个所述主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据；对每个所述主题库对应的第一业务数据进行数据治理，以获取每个所述主题库对应的第二业务数据；将每个所述主题库对应的第二业务数据推送给所述大数据平台。2.如权利要求1所述的方法，其特征在于，每个所述主题库对应的数据资源目录包括目标业务系统及每个所述主题库包含的各属性项，所述根据每个所述主题库对应的数据资源目录，从各业务系统中获取每个主题库对应的第一业务数据，包括：根据每个所述主题库包含的各属性项，从所述目标业务系统中获取所述第一业务数据，其中，所述第一业务数据包括所述各属性项对应的属性值。3.如权利要求2所述的方法，其特征在于，所述目标业务系统为多个，所述根据每个所述主题库包含的各属性项，从所述目标业务系统中获取所述第一业务数据，包括：根据每个所述主题库包含的各属性项，从每个目标业务系统中获取至少一个属性项对应的属性值。4.如权利要求2所述的方法，其特征在于，其中，每个所述主题库对应的数据资源目录还包括每个属性项对应的数据格式，所述对每个所述主题库对应的第一业务数据进行数据治理，以获取每个所述主题库对应的第二业务数据，包括：基于自然语言处理NLP，将每个属性项对应的属性值的数据格式与所述目标数据格式进行匹配；在任一属性值的数据格式与所述目标数据格式不匹配的情况下，对所述任一属性值进行处理，以使所述任一属性值的数据格式为所述目标数据格式。5.如权利要求2所述的方法，其特征在于，所述数据资源目录中包括各属性项的顺序，所述将每个所述主题库对应第二业务数据推送给所述大数据平台，包括：根据每个主题库对应的各属性项的顺序，将各属性项对应的属性值进行整合；将整合后的所述第二业务数据推送给大数据平台。6.如权利要求1
‑
5任一所述的方法，其特征在于，所述将每个所述主题库对应的第二数据推送给所述大数据平台，包括：通过所述大数据平台的接口，将每个所述主题库对应的第二业务数据推送给所述大数据平台；或者，将每个所述主题库对应的第二业务数据写入所述大数据平台的数据库。7.一种基于RPA和AI的数据汇聚装置，其特征在于，包括：第一获取模块，用于获取大数据平台中各主题库分别对应...

【专利技术属性】
技术研发人员：荣文杰，汪冠春，胡一川，褚瑞，李玮，
申请(专利权)人：来也科技北京有限公司，
类型：发明
国别省市：