客户信息数据核对方法及装置制造方法及图纸

技术编号:35742773 阅读:13 留言:0更新日期:2022-11-26 18:46
本发明专利技术公开了一种客户信息数据核对方法及装置,应用于分布式技术领域,其中该方法包括:构建数据映射参数集,其用于记录上游系统将数据下传至数据仓库时的映射参数;在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照客户信息的数据项将上游系统的源表中的客户信息写入目标表中;按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对。本发明专利技术降低了核对复杂度和错误率,减少人工报送可能出现的误差,优化客户信息数据的自动核对过程。自动核对过程。自动核对过程。

【技术实现步骤摘要】
客户信息数据核对方法及装置


[0001]本专利技术涉及分布式
,尤其涉及客户信息数据核对方法及装置。

技术介绍

[0002]本部分旨在为权利要求书中陈述的本专利技术实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
[0003]客户信息管理在企业级系统中占有相当重要的地位,比较常见的使用场景是客户信息视图,该信息视图在业务指标分析和精准营销中应用广泛,但是在大量数据铺底处理时,无法实现灵活的数据总量核对。
[0004]目前,亟需一种能够灵活实现客户信息数据核对的方法,降低核对复杂度和错误率,减少人工报送可能出现的误差,优化客户信息数据的自动核对过程。

技术实现思路

[0005]本专利技术实施例提供一种客户信息数据核对方法,用以降低统计复杂度和错误率,优化客户信息数据的自动核对过程,从而实现支持多属性数据总量的自动化核对,该方法包括:
[0006]构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表;
[0007]在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中;
[0008]按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对。
[0009]本专利技术实施例还提供一种客户信息数据核对装置,用以降低统计复杂度和错误率,优化客户信息数据的自动核对过程,从而实现支持多属性数据总量的自动化核对,该装置包括:
[0010]数据映射参数集构建模块,用于构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表;
[0011]数据写入模块,用于在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中;
[0012]数据核对模块,用于按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对。
[0013]本专利技术实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述客户信息数据核对方法。
[0014]本专利技术实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述客户信息数据核对方法。
[0015]本专利技术实施例还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序被处理器执行时实现上述客户信息数据核对方法。
[0016]本专利技术实施例与现有技术中需要维护人员参与整个核对过程,并且不同上游系统的维护人员都需要独立进行手工核对相比,本专利技术通过构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表;在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中;按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对;在上述过程中,本专利技术实施例结合统计维度,在源表数据和目标表数据的基础上,利用数据映射参数集查询目标表的数据结构,按照预设核对规则进行核对,从而降低核对复杂度和错误率,减少人工报送可能出现的误差,优化客户信息数据的自动核对过程。
附图说明
[0017]为了更清楚地说明本专利技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
[0018]图1为本专利技术实施例中客户信息数据核对方法的流程图;
[0019]图2为本专利技术实施例中源表和目标表数据量核对的流程图;
[0020]图3为本专利技术实施例中提取数据项组合中的单个数据项的流程图;
[0021]图4为本专利技术实施例提出的客户信息数据核对装置的示意图;
[0022]图5为本专利技术实施例中计算机设备的示意图。
具体实施方式
[0023]为使本专利技术实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本专利技术实施例做进一步详细说明。在此,本专利技术的示意性实施例及其说明用于解释本专利技术,但并不作为对本专利技术的限定。
[0024]图1为本专利技术实施例中客户信息数据核对方法的流程图,包括:
[0025]步骤101,构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表;
[0026]步骤102,在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所
对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中;
[0027]步骤103,按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对。
[0028]在步骤101中,构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表。
[0029]在本专利技术实施例中,所述数据映射参数集的形式为表格或文件。
[0030]具体实施过程中,所述映射参数包括上游系统、源表和目标表:
[0031]目标表名称为数据仓库中的预处理表名,比如客户信息视图表等,如果映射形式是table,那么键值KEY就是目标表名;
[0032]上游系统或组件名称为源系统或组件名,比如核心系统、客户信息组件等;
[0033]上游表名称为源表名称,比如对公证件信息表、对私基本信息表、对私地址信息表等。
[0034]在步骤102中,在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中。
[0035]在本专利技术实施本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种客户信息数据核对方法,其特征在于,包括:构建数据映射参数集,所述数据映射参数集用于记录上游系统将数据下传至数据仓库时的映射参数,所述映射参数包括上游系统、源表和目标表;在获得客户信息的上游系统的源表后,查询数据映射参数集,获得客户信息的目标表的数据结构,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,并按照所述客户信息的数据项将上游系统的源表中的客户信息写入目标表中;按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对。2.如权利要求1所述的方法,其特征在于,所述数据映射参数集的形式为表格或文件。3.如权利要求1所述的方法,其特征在于,按照统计维度,将上游系统的源表中的数据项转化为目标表所对应的客户信息的数据项,包括:当源表中的数据项为单个时,确定目标表所对应的客户信息的数据项与源表中的数据项一致;当源表中的数据项为多个时,根据源表中的多个数据项,确定目标表所对应的客户信息的一个数据项,其中,多个数据项采用自定义分隔符进行连接。4.如权利要求3所述的方法,其特征在于,按照统计维度,分别统计源表中的数据量和目标表中的数据量,按照预设核对规则,对源表中的数据量和目标表中的数据量进行核对,包括:按照统计维度,统计源表中的数据量,写入源数据量数组;当源表中的数据项为单个时,按照统计维度,将目标表中的数据量写入目标数据量数组;当源表中的数据项为多个时,按照统计维度,将目标表中的数据量写入包含多个数据项组合的目标数据量数组,将所述自定义分隔符作为解析数据项组合的标识,提取出数据项组合中单个的数据项;根据预设的核对规则,对源数据量数组和目标数据量数组进行核对,获得核对明细;将核对明细写入核对结果文件,所述的核对明细包括核对对象、核对结果和核对时间中的其中之一或任意组合。5.如权利要求4所述的方法,其特征在于,将所述自定义分隔符作为解析数据项组合的标识,提取出数据项组合中单个的数据项,包括:当遇到第一个分隔符时,取数据项组合中所述自定义分隔符之前的字符串赋值给目标数据量数组当中的第一个单个的数据项;当遇到第二个分隔符时,取第一个自定义分隔符与第二个自定义分隔符之间的字符串赋值给目标数据量数组当中的第二个单个数据项,以此类推提取出所有的单个的数据项。6.如权利要求4所述的方法,其特征在于,还包括:将最终得到的核对结果文件传输给目标对象,供开发人员进行分析或打印,所述目标对象包括指定的IP和路径。7.一种客户信息数据核对装置,其特征在于,包括:数据映射参数集构建模块,用于构建数据映射参数集,所述数据映射参数集用于记录
上游系统将数据下传至数据仓库时的...

【专利技术属性】
技术研发人员:张康洁
申请(专利权)人:中国银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1