一种数据处理方法、装置、设备及介质制造方法及图纸

本申请公开了一种数据处理方法、装置、设备及介质，涉及数据分析技术领域，用以对大屏展示的数据的质量进行有效把控。由于本申请可以在接收到携带有数据来源信息的数据处理指令时，判断该数据来源信息对应的待处理数据是否存在异常；若存在异常，则不展示待处理数据；或者，对待处理数据进行修正并展示；若不存在异常，则展示待处理数据，从而可以对大屏展示的数据的质量进行有效把控。的数据的质量进行有效把控。的数据的质量进行有效把控。

【技术实现步骤摘要】
一种数据处理方法、装置、设备及介质


[0001]本申请涉及数据分析
，尤其涉及一种数据处理方法、装置、设备及介质。

技术介绍

[0002]通过大屏展示业务数据(可视化大屏)具有可以使用户更清晰、更直观地了解业务等优势，随着大数据技术等的不断发展，通过大屏展示业务数据应用到越来越多的场景和行业中。
[0003]然而通过大屏展示的业务数据(为方便描述，下文称为数据)往往比较直观，对数据的质量要求较高，一旦大屏中展示的数据出现异常，往往会出现比较严重的后果。因此，如何对大屏展示的数据的质量进行有效把控是目前亟需解决的一个技术问题。

技术实现思路

[0004]本申请提供了一种数据处理方法、装置、设备及介质，用以对大屏展示的数据的质量进行有效把控。
[0005]第一方面，本申请提供了一种数据处理方法，所述方法包括：
[0006]接收数据处理指令，其中，所述数据处理指令携带有数据来源信息；
[0007]判断所述数据来源信息对应的待处理数据是否存在异常；
[0008]若是，则不展示所述待处理数据；或者，对所述待处理数据进行修正并展示；
[0009]若否，则展示所述待处理数据。
[0010]在一种可能的实施方式中，确定所述数据来源信息对应的待处理数据存在异常包括：
[0011]若获取不到所述数据来源信息对应的待处理数据，则确定所述数据来源信息对应的待处理数据存在异常；或者，
[0012]若所述待处理数据中存在为空的任一子数据，则确定所述待处理数据存在异常；或者，
[0013]若所述待处理数据与第一设定时长内获取到的所述数据来源信息的每个待处理数据均相同，则确定所述待处理数据存在异常；或者，
[0014]若所述待处理数据的格式与所述数据来源信息对应数据的格式不相同，则确定所述待处理数据存在异常；或者，
[0015]将所述待处理数据输入预先训练完成的分析模型，若所述分析模型的输出结果为异常，则确定所述待处理数据存在异常；或者，
[0016]确定所述待处理数据中包含的每个子数据及对应的每个目标标识；根据预先确定的标识与数据质量要求的对应关系，确定所述每个目标标识分别对应的目标质量要求；若任一目标标识对应的子数据不满足对应的目标质量要求，则确定所述待处理数据存在异常。
[0017]在一种可能的实施方式中，所述对所述待处理数据进行修正包括：
[0018]基于保存的所述数据来源信息对应的历史数据，对所述数据来源信息对应的待处理数据进行修正。
[0019]在一种可能的实施方式中，所述对所述待处理数据进行修正包括：
[0020]若确定所述待处理数据中包含的每个子数据及对应的每个目标标识，根据预先确定的标识与数据质量要求的对应关系，确定所述每个目标标识分别对应的目标质量要求，任一目标标识对应的子数据不满足对应的目标质量要求时，针对不满足对应的目标质量要求的目标标识的子数据，获取该子数据对应的标准子数据；根据所述标准子数据，对该目标标识的子数据进行修正。
[0021]在一种可能的实施方式中，确定标识与数据质量要求的对应关系的过程包括：
[0022]针对任一标识，根据保存的该标识对应的第二设定时长内的历史子数据，确定所述第二设定时长内，该标识的历史子数据的分布规律；基于所述分布规律，确定该标识对应的数据取值区间；保存该标识与所述数据取值区间的对应关系。
[0023]在一种可能的实施方式中，所述获取该子数据对应的标准子数据包括：
[0024]将保存的该目标标识对应的历史子数据的任一数据或数据平均值或数据最大值或数据最小值，确定为该子数据对应的标准子数据；或者，
[0025]根据之前展示的该目标标识对应的标准子数据，确定该子数据对应的标准子数据；或者，
[0026]接收输入的数据，将接收到的所述数据，确定为该子数据对应的标准子数据。
[0027]在一种可能的实施方式中，若将保存的该目标标识对应的历史子数据的任一数据或数据平均值或数据最大值或数据最小值，确定为该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：
[0028]确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长不大于预设的处理时长，则进行后续步骤；或者，
[0029]若该目标标识对应的子数据不满足其对应的目标质量要求的次数未超过设定次数阈值，则进行后续步骤。
[0030]在一种可能的实施方式中，若接收输入的数据，将接收到的所述数据，确定为该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：
[0031]确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长大于预设的处理时长，则输出预设的提示信息，并进行后续步骤；或者，
[0032]若该目标标识对应的子数据不满足其对应的目标质量要求的次数未超过设定次数阈值，则进行后续步骤。
[0033]在一种可能的实施方式中，若根据之前展示的该目标标识对应的设定数量的标准子数据，确定该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：
[0034]若该目标标识对应的子数据不满足其对应的目标质量要求的次数超过设定次数阈值，则进行后续步骤；或者，
[0035]确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长不大于预设的处理时长，则进行后续步骤。
[0036]第二方面，本申请提供了一种数据处理装置，所述装置包括：
[0037]接收模块，用于接收数据处理指令，其中，所述数据处理指令携带有数据来源信息；
[0038]判断模块，用于判断所述数据来源信息对应的待处理数据是否存在异常；
[0039]处理模块，用于若所述数据来源信息对应的待处理数据存在异常，则不展示所述待处理数据；或者，对所述待处理数据进行修正并展示；
[0040]若所述数据来源信息对应的待处理数据不存在异常，则展示所述待处理数据。
[0041]在一种可能的实施方式中，所述判断模块，具体用于若获取不到所述数据来源信息对应的待处理数据，则确定所述数据来源信息对应的待处理数据存在异常；或者，
[0042]若所述待处理数据中存在为空的任一子数据，则确定所述待处理数据存在异常；或者，
[0043]若所述待处理数据与第一设定时长内获取到的所述数据来源信息的每个待处理数据均相同，则确定所述待处理数据存在异常；或者，
[0044]若所述待处理数据的格式与所述数据来源信息对应数据的格式不相同，则确定所述待处理数据存在异常；或者，
[0045]将所述待处理数据输入预先训练完成的分析模型，若所述分析模型的输出结果为异常，则确定所述待处理数据存在异常；或者，
[0046]确定所述待处理数据中包含的每个子数据及对应的每个目标标识；根据预先确定的标识与数据质量要求的对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：接收数据处理指令，其中，所述数据处理指令携带有数据来源信息；判断所述数据来源信息对应的待处理数据是否存在异常；若是，则不展示所述待处理数据；或者，对所述待处理数据进行修正并展示；若否，则展示所述待处理数据。2.根据权利要求1所述的方法，其特征在于，确定所述数据来源信息对应的待处理数据存在异常包括：若获取不到所述数据来源信息对应的待处理数据，则确定所述数据来源信息对应的待处理数据存在异常；或者，若所述待处理数据中存在为空的任一子数据，则确定所述待处理数据存在异常；或者，若所述待处理数据与第一设定时长内获取到的所述数据来源信息的每个待处理数据均相同，则确定所述待处理数据存在异常；或者，若所述待处理数据的格式与所述数据来源信息对应数据的格式不相同，则确定所述待处理数据存在异常；或者，将所述待处理数据输入预先训练完成的分析模型，若所述分析模型的输出结果为异常，则确定所述待处理数据存在异常；或者，确定所述待处理数据中包含的每个子数据及对应的每个目标标识；根据预先确定的标识与数据质量要求的对应关系，确定所述每个目标标识分别对应的目标质量要求；若任一目标标识对应的子数据不满足对应的目标质量要求，则确定所述待处理数据存在异常。3.根据权利要求1或2所述的方法，其特征在于，所述对所述待处理数据进行修正包括：基于保存的所述数据来源信息对应的历史数据，对所述数据来源信息对应的待处理数据进行修正。4.根据权利要求1或2所述的方法，其特征在于，所述对所述待处理数据进行修正包括：若确定所述待处理数据中包含的每个子数据及对应的每个目标标识，根据预先确定的标识与数据质量要求的对应关系，确定所述每个目标标识分别对应的目标质量要求，任一目标标识对应的子数据不满足对应的目标质量要求时，针对不满足对应的目标质量要求的目标标识的子数据，获取该子数据对应的标准子数据；根据所述标准子数据，对该目标标识的子数据进行修正。5.根据权利要求4所述的方法，其特征在于，确定标识与数据质量要求的对应关系的过程包括：针对任一标识，根据保存的该标识对应的第二设定时长内的历史子数据，确定所述第二设定时长内，该标识的历史子数据的分布规律；基于所述分布规律，确定该标识对应的数据取值区间；保存该标识与所述数据取值区间的对应关系。6.根据权利要求4所述的方法，其特征在于，所述获取该子数据对应的标准子数据包括：将保存的该目标标识对应的历史子数据的任一数据或数据平均值或数据最大值或数据最小值，确定为该子数据对应的标准子数据；或者，根据之前展示的该目标标识对应的标准子数据，确定该子数据对应的标准子数据；或者，
接收输入的数据，将接收到的所述数据，确定为该子数据对应的标准子数据。7.根据权利要求6所述的方法，其特征在于，若将保存的该目标标识对应的历史子数据的任一数据或数据平均值或数据最大值或数据最小值，确定为该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长不大于预设的处理时长，则进行后续步骤；或者，若该目标标识对应的子数据不满足其对应的目标质量要求的次数未超过设定次数阈值，则进行后续步骤。8.根据权利要求6所述的方法，其特征在于，若接收输入的数据，将接收到的所述数据，确定为该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长大于预设的处理时长，则输出预设的提示信息，并进行后续步骤；或者，若该目标标识对应的子数据不满足其对应的目标质量要求的次数未超过设定次数阈值，则进行后续步骤。9.根据权利要求6所述的方法，其特征在于，若根据之前展示的该目标标识对应的设定数量的标准子数据，确定该子数据对应的标准子数据，则所述获取该子数据对应的标准子数据之前，所述方法还包括：若该目标标识对应的子数据不满足其对应的目标质量要求的次数超过设定次数阈值，则进行后续步骤；或者，确定所述待处理数据的待展示时间与当前时间之间的间隔时长；若所述间隔时长不大于预设的处理时长，则进行后续步骤。10.一种数据处理装置，其特征在于，所述装置包括：接收模块，用于接收数据处理指令，其中，所述数据处理指令携带有数据来源信息；判断模块，用于判断所述数据来源信息对应的待处理数据是否存在异常；处理模块，用于若所述数据来源信息对应的待处理数据存在异常，则不展示所述待处理数据；或者，对所述待处理数据进行修正并展示；若所述数据来源信息对应的待处理数据不存在异常，则展示所述待处理数据。11....

【专利技术属性】
技术研发人员：周泉，
申请(专利权)人：中国建设银行股份有限公司，
类型：发明
国别省市：