业务处理方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:38218844 阅读:9 留言:0更新日期:2023-07-25 11:30
本申请涉及一种业务处理方法、装置、计算机设备和存储介质,涉及数据处理技术领域。所述方法包括:响应于对目标业务的业务处理需求,获取处理目标业务所需的初始数据;然后采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据;进而采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据;进一步的,根据第一目标数据和第二目标数据,对目标业务进行处理。采用本方法能够贴合不同业务的业务处理需求,通过对业务所需的半结构化数据和结构化数据,分别进行定性分析和定量分析,实现了在多个维度提升数据分析的效果,从而保证了业务处理的质量。从而保证了业务处理的质量。从而保证了业务处理的质量。

【技术实现步骤摘要】
业务处理方法、装置、计算机设备和存储介质


[0001]本申请涉及数据处理
,特别是涉及一种业务处理方法、装置、计算机设备和存储介质。

技术介绍

[0002]近年来,数字经济蓬勃发展,数据不仅是国家基础性战略资源,也是推动经济社会创新发展的关键生产要素。随着技术、业务的发展以及新场景的应用,能源系统中汇聚了海量的能源数据,为了实现不同的能源业务,需要对这些能源数据进行可靠的数据挖掘及数据分析等处理。
[0003]目前,随着能源数据的不断扩大,常规的数据挖掘和数据分析方式已无法贴合不同的能源业务的业务需求,无法对不同结构的能源数据进行有效处理,给后续的业务处理带来较大困难。

技术实现思路

[0004]基于此,有必要针对上述技术问题,提供一种能够对不同结构的业务数据进行有效处理,从而保证业务处理质量的业务处理方法、装置、计算机设备和存储介质。
[0005]第一方面,本申请提供了一种业务处理方法,该方法包括:
[0006]响应于对目标业务的业务处理需求,获取处理目标业务所需的初始数据;其中,初始数据包括结构化数据和半结构化数据;
[0007]采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据;
[0008]采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据;
[0009]根据第一目标数据和第二目标数据,对目标业务进行处理。
[0010]在其中一个实施例中,该方法还包括:<br/>[0011]采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据,包括:
[0012]根据结构化数据包含的数据字段的字段名和字段注释,以及业务处理需求,从结构化数据包含的数据字段中选择处理目标业务所需的目标数据字段;
[0013]采用预设的统计模型,对目标数据字段的字段内容进行定量分析处理,得到结构化数据对应的第二目标数据。
[0014]在其中一个实施例中,采用预设的统计模型,对目标数据字段的字段内容进行定量分析处理,得到结构化数据对应的第二目标数据,包括:
[0015]采用预设的统计模型,从预设数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段在预设数据维度下的分布数据;其中,预设数据维度包括集中趋势、离散程度、偏态分布和峰态分布中的至少一个数据维度;
[0016]根据目标数据字段在预设数据维度下的分布数据,确定结构化数据对应的第二目标数据。
[0017]在其中一个实施例中,采用预设的统计模型,从预设数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段在预设数据维度下的分布数据,包括:
[0018]根据预设的第一统计模型,从集中趋势数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段对应的简单平均数、加权平均数和几何平均数,并将目标数据字段对应的简单平均数、加权平均数和几何平均数,作为目标数据字段在集中趋势数据维度下的分布数据;
[0019]根据预设的第二统计模型,从离散程度数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段对应的极差、平均差和方差,并将目标数据字段对应的极差、平均差和方差,作为目标数据字段在离散程度数据维度下的分布数据;
[0020]根据预设的第三统计模型,从偏态分布数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段对应的偏态系数,并将目标数据字段对应的偏态系数,作为目标数据字段在偏态分布数据维度下的分布数据;
[0021]根据预设的第四统计模型,从峰态分布数据维度对目标数据字段的字段内容进行定量分析处理,得到目标数据字段对应的峰态系数,并将目标数据字段对应的峰态系数,作为目标数据字段在峰态分布数据维度下的分布数据。
[0022]在其中一个实施例中,采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据,包括:
[0023]将半结构化数据中具有正则表达格式的数据作为规则数据,并将半结构化数据中除规则数据之外的数据作为非规则数据;
[0024]采用目标业务对应的正则表达式,对规则数据进行定性分析处理,得到规则数据对应的处理后的数据;
[0025]将非规则数据与数据字典中的关键字段进行模糊匹配,得到非规则数据对应的匹配数据;
[0026]将规则数据对应的处理后的数据和非规则数据对应的匹配数据,作为半结构化数据对应的第一目标数据。
[0027]在其中一个实施例中,目标业务为数据脱敏业务;根据第一目标数据和第二目标数据,对目标业务进行处理,包括:
[0028]获取数据脱敏业务对应的脱敏规则;
[0029]采用脱敏规则,对第一目标数据和第二目标数据进行脱敏处理。
[0030]第二方面,本申请还提供了一种业务处理装置,该装置包括:
[0031]获取模块,用于响应于对目标业务的业务处理需求,获取处理目标业务所需的初始数据;其中,初始数据包括结构化数据和半结构化数据;
[0032]第一处理模块,用于采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据;
[0033]第二处理模块,用于采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据;
[0034]第三处理模块,用于根据第一目标数据和第二目标数据,对目标业务进行处理。
[0035]第三方面,本申请还提供了一种计算机设备,所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
[0036]响应于对目标业务的业务处理需求,获取处理目标业务所需的初始数据;其中,初始数据包括结构化数据和半结构化数据;
[0037]采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据;
[0038]采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据;
[0039]根据第一目标数据和第二目标数据,对目标业务进行处理。
[0040]第四方面,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
[0041]响应于对目标业务的业务处理需求,获取处理目标业务所需的初始数据;其中,初始数据包括结构化数据和半结构化数据;
[0042]采用目标业务对应的正则表达式,对半结构化数据进行定性分析处理,得到半结构化数据对应的第一目标数据;
[0043]采用预设的统计模型,对结构化数据进行定量分析处理,得到结构化数据对应的第二目标数据;
[0044]根据第一目标数据和第二目标数据,对目标业务进行处理。
[0045]第五方面,本申请还提供了本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种业务处理方法,其特征在于,所述方法包括:响应于对目标业务的业务处理需求,获取处理所述目标业务所需的初始数据;其中,所述初始数据包括结构化数据和半结构化数据;采用所述目标业务对应的正则表达式,对所述半结构化数据进行定性分析处理,得到所述半结构化数据对应的第一目标数据;采用预设的统计模型,对所述结构化数据进行定量分析处理,得到所述结构化数据对应的第二目标数据;根据所述第一目标数据和所述第二目标数据,对所述目标业务进行处理。2.根据权利要求1所述的方法,其特征在于,所述采用预设的统计模型,对所述结构化数据进行定量分析处理,得到所述结构化数据对应的第二目标数据,包括:根据所述结构化数据包含的数据字段的字段名和字段注释,以及所述业务处理需求,从所述结构化数据包含的数据字段中选择处理所述目标业务所需的目标数据字段;采用预设的统计模型,对所述目标数据字段的字段内容进行定量分析处理,得到所述结构化数据对应的第二目标数据。3.根据权利要求2所述的方法,其特征在于,所述采用预设的统计模型,对所述目标数据字段的字段内容进行定量分析处理,得到所述结构化数据对应的第二目标数据,包括:采用预设的统计模型,从预设数据维度对所述目标数据字段的字段内容进行定量分析处理,得到所述目标数据字段在所述预设数据维度下的分布数据;其中,所述预设数据维度包括集中趋势、离散程度、偏态分布和峰态分布中的至少一个数据维度;根据所述目标数据字段在所述预设数据维度下的分布数据,确定所述结构化数据对应的第二目标数据。4.根据权利要求3所述的方法,其特征在于,所述采用预设的统计模型,从预设数据维度对所述目标数据字段的字段内容进行定量分析处理,得到所述目标数据字段在所述预设数据维度下的分布数据,包括:根据预设的第一统计模型,从集中趋势数据维度对所述目标数据字段的字段内容进行定量分析处理,得到所述目标数据字段对应的简单平均数、加权平均数和几何平均数,并将所述目标数据字段对应的简单平均数、加权平均数和几何平均数,作为所述目标数据字段在所述集中趋势数据维度下的分布数据;根据预设的第二统计模型,从离散程度数据维度对所述目标数据字段的字段内容进行定量分析处理,得到所述目标数据字段对应的极差、平均差和方差,并将所述目标数据字段对应的极差、平均差和方差,作为所述目标数据字段在所述离散程度数据维度下的分布数据;根据预设的第三统计模型,从偏态分布数据维度对所述目标数据字段的字段内容进行定量分析处理,得到所述目标数据字...

【专利技术属性】
技术研发人员:李清王程斯黄安子史纪李智诚闫梦秋
申请(专利权)人:深圳供电局有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1