数据校正方法、装置和计算机设备制造方法及图纸

技术编号:38275791 阅读:19 留言:0更新日期:2023-07-27 10:27
本说明书实施方式提供了一种数据校正方法、装置和计算机设备。所述方法包括:在存储的结果数据中识别存在异常的异常结果数据;其中,所述结果数据是数据管道根据从第一数据源获取的原始数据生成的;其中,所述异常结果数据对应的所述数据管道中生成所述异常结果数据的原始数据作为异常原始数据;获取所述异常原始数据的原始数据标识;向第二数据源发送附带有所述异常原始数据的原始数据标识的数据获取请求,以使所述第二数据源将所述原始数据标识表征的原始数据发送给所述数据管道,并由所述数据管道根据所述原始数据生成用于校正所述异常结果数据的目标结果数据。通过上述技术方法,可以校正数据,提高数据的准确性。提高数据的准确性。提高数据的准确性。

【技术实现步骤摘要】
数据校正方法、装置和计算机设备


[0001]本说明书中实施方式关于计算机数据处理的
,具体涉及一种数据校正方法、装置和计算机设备。

技术介绍

[0002]目前,随着信息技术的飞速发展,互联网技术、多媒体技术、物联网技术以及云计算计算也迅速蓬勃发展,大量的数据信息需要被传递,但是由于数据信息从存储原始数据的数据库中传输到目标数据库的过程中处理逻辑复杂,可能造成数据信息在传递前后的不一致性。
[0003]因此,现有技术中数据库中存在异常数据可能不满足用户需求的技术问题。

技术实现思路

[0004]有鉴于此,本说明书多个实施方式致力于提供一种数据校正方法、装置和计算机设备,以一定程度上解决满足用户对数据准确性需求的问题。
[0005]本说明书的一个实施方式提供一种数据的数据校正方法,包括:在存储的结果数据中识别存在异常的异常结果数据;其中,所述结果数据是数据管道根据从第一数据源获取的原始数据生成的;其中,所述异常结果数据对应的所述数据管道中生成所述异常结果数据的原始数据作为异常原始数据;获取所述异常原始数据的原始数据标识;向第二数据源发送附带有所述异常原始数据的原始数据标识的数据获取请求,以使所述第二数据源将所述原始数据标识表征的原始数据发送给所述数据管道,并由所述数据管道根据所述原始数据生成用于校正所述异常结果数据的目标结果数据。
[0006]本说明书的一个实施方式提供一种数据校正方法,包括:存储从第一数据源获取的原始数据;其中,所述第一数据源的原始数据会发送给数据管道,以用于经由所述数据管道生成存储在指定数据库的结果数据;接收数据获取请求;其中,所述数据获取请求附带有原始数据标识;在存储的原始数据中读取所述原始数据标识对应的目标原始数据;将所述目标原始数据发送给所述数据管道,以使所述数据管道基于所述目标原始数据生成目标结果数据;其中,所述目标结果数据用于校正所述指定数据库存储的与所述目标结果数据具有相同结果数据标识的异常结果数据。
[0007]本说明书的一个实施方式提供一种数据校正装置,包括:识别模块,用于在存储的结果数据中识别存在异常的异常结果数据;其中,所述结果数据是数据管道根据从第一数据源获取的原始数据生成的;其中,所述异常结果数据对应的所述数据管道中生成所述异常结果数据的原始数据作为异常原始数据;标识获取模块,用于获取所述异常原始数据的原始数据标识;请求发送模块,用于向第二数据源发送附带有所述异常原始数据的原始数据标识的数据获取请求,以使所述第二数据源将所述原始数据标识表征的原始数据发送给所述数据管道,并由所述数据管道根据所述原始数据生成用于校正所述异常结果数据的目标结果数据。
[0008]本说明书的一个实施方式提供一种数据校正装置,包括:存储模块,用于存储从第一数据源获取的原始数据;其中,所述第一数据源的原始数据会发送给数据管道,以用于经由所述数据管道生成存储在指定数据库的结果数据;接收模块,用于接收数据获取请求;其中,所述数据获取请求附带有原始数据标识;读取模块,用于在存储的原始数据中读取所述原始数据标识对应的目标原始数据;数据发送模块,用于将所述目标原始数据发送给所述数据管道,以使所述数据管道基于所述目标原始数据生成目标结果数据;其中,所述目标结果数据用于校正所述指定数据库存储的与所述目标结果数据具有相同结果数据标识的异常结果数据。
[0009]本说明书的一个实施方式提供计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述实施方式中的方法步骤。
[0010]本说明书的一个实施方式提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被计算机执行时使得,该计算机执行上述任一实施方式中的方法步骤。
[0011]本说明书的一个实施方式提供一种包含指令的计算机程序产品,该指令被计算机执行时使得计算机执行上述任一实施方式中的方法步骤。
[0012]本说明书提供的多个实施方式,通过客户端发送数据异常识别指令给存储结果数据的数据库,在该数据库中识别出存在异常的异常结果数据,异常结果数据是数据管道根据从第一数据源获取的原始数据生成的,与异常结果数据相对应的原始数据作为异常原始数据。客户端从数据库中获取异常原始数据的原始数据标识,向第二数据库发送附带有异常原始数据对应的原始数据标识的数据获取请求,以使第二数据源将原始数据标识表征的原始数据发送给数据管道,由数据管道根据原始数据生成用于校正异常数据的目标数据,并把该目标结果数据发送给存储结果数据的数据库中。实现了对数据库的结果数据进行校正。
附图说明
[0013]图1为本说明书的一个实施方式提供的数据校正方法的应用环境示意图。
[0014]图2为本说明书的一个实施方式提供的数据校正方法的流程示意图。
[0015]图3为本说明书的一个实施方式提供的数据校正方法的流程示意图。
[0016]图4为本说明书的一个实施方式提供的数据校正装置的功能模块示意图。
[0017]图5为本说明书的一个实施方式提供的数据校正装置的功能模块示意图。
[0018]图6为本说明书的一个实施方式提供的计算机设备的内部结构示意图。
具体实施方式
[0019]在相关技术中,通过目标数据库中缺失数据的数据标识,在存储原始数据的原始数据库中通过该数据库中的脚本触发二进制日志的方式刷新得到具有该数据标识的数据,再将刷新得到的数据通过下游程序更新到目标数据库中。但是通过在原始数据库脚本触发二进制日志的刷新数据方式会产生大量数据,可能会给原始数据库带来压力,影响线上正常的业务。
[0020]因此,有必要提供一种数据校正方法,可以通过客户端发送数据校验的指令给存
储结果数据的数据库,该结果数据是根据第一数据源获得原始数据生成的,对应数据管道中生成的异常结果数据的原始数据作为异常原始数据,获得该异常原始数据的原始数据标识,并向第二数据源发送附带有原始数据标识的数据获取请求,以使第二数据源将原始数据标识表征的原始数据发送给数据管道,并由数据管道根据原始数据生成用于校正异常数据结果的目标结果数据。解决刷新数据产生大量数据的技术问题。
[0021]请参阅图1,本说明书实施方式提供一种数据校正系统。且本说明书提供的数据校正方法应用于该数据校正系统。所述数据校正系统可以包括客户端110和服务器120形成的硬件环境。客户端110通过网络与服务器120进行通信。其中,所述客户端110可以是具有网络访问能力的电子设备。具体的,例如,客户端110可以是台式电脑、平板电脑、笔记本电脑、智能手机、数字助理、智能可穿戴设备、导购终端、电视机、智能音箱、麦克风等。其中,智能可穿戴设备包括但不限于智能手环、智能手表、智能眼镜、智能头盔、智能项链等。或者,客户端也可以为能够运行于所述电子设备中的软件。服务器120可以是具有一定运算处理能力的电子设备。其可以具有网络通信模块、处理器和存储器等。当然,所述服务器120也可以是指运行于所述本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据校正方法,其特征在于,包括:在存储的结果数据中识别存在异常的异常结果数据;其中,所述结果数据是数据管道根据从第一数据源获取的原始数据生成的;其中,所述异常结果数据对应的所述数据管道中生成所述异常结果数据的原始数据作为异常原始数据;获取所述异常原始数据的原始数据标识;向第二数据源发送附带有所述异常原始数据的原始数据标识的数据获取请求,以使所述第二数据源将所述原始数据标识表征的原始数据发送给所述数据管道,并由所述数据管道根据所述原始数据生成用于校正所述异常结果数据的目标结果数据。2.根据权利要求1所述的方法,其特征在于,所述方法还包括:接收数据管道发送的基于第一数据源的原始数据执行数据运算规则生成的结果数据;其中,所述结果数据依照指定运算与原始数据相对应;相应的,获取所述异常原始数据的原始数据标识的步骤,包括:向所述数据管道发送针对所述异常结果数据的原始数据标识获取请求;其中,所述原始数据标识获取请求附带有所述异常结果数据的结果数据标识,接收所述数据管道使用所述结果数据标识反馈的原始数据标识。3.根据权利要求1所述的方法,其特征在于,所述方法还包括:获取数据管道中集成的数据运算规则对应的原始数据的原始数据标识和结果数据的结果数据标识;对应所述数据运算规则存储原始数据标识和结果数据标识;相应的,获取所述异常原始数据的原始数据标识的步骤,包括:在存储的原始数据标识中读取所述异常结果数据的结果数据标识对应的原始数据标识。4.根据权利要求1所述的方法,其特征在于,所述第二数据源存储有源于所述第一数据源的原始数据;向第二数据源发送附带有所述原始数据标识的数据获取请求中还附带有管道标识,以使所述第二数据源将所述原始数据标识表征的原始数据发送给所述管道标识表示的数据管道。5.一种数据校正方法,其特征在于,包括:存储从第一数据源获取的原始数据;其中,所述第一数据源的原始数据会发送给数据管道,以用于经由所述数据管道生成存储在指定数据库的结果数据;接收数据获取请求;其中,所述数据获取请求附带有原始数据标识;在存储的原始数据中读取所述原始数据标识对应的目标原始数据;将所述目标原始数据发送给所述数据管道,以使所述数据管...

【专利技术属性】
技术研发人员:陈诚王仕凯戴橙
申请(专利权)人:浙江太美医疗科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1