数据处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:29967087 阅读:11 留言:0更新日期:2021-09-08 09:36
本发明专利技术涉及数据处理技术领域,具体涉及数据处理方法、装置、电子设备及存储介质,所述方法包括获取待处理数据;对所述待处理数据进行解析,确定所述待处理数据的属性信息及相关信息;聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据。通过将待处理数据的属性信息与相关信息进行关联,避免将不同信息割裂分别存储,后续在对目标数据进行查询时,不仅可以得到属性信息还可以得到相关信息,减少了数据的维护成本,解决了数据查询困难以及数据维护困难的问题。数据维护困难的问题。数据维护困难的问题。

【技术实现步骤摘要】
数据处理方法、装置、电子设备及存储介质


[0001]本专利技术涉及数据处理
,具体涉及数据处理方法、装置、电子设备及存储介质。

技术介绍

[0002]目前各公司都积攒起了大量的业务数据,这些数据涉及到各个业务线的方方面面,是各大互联网公司的核心资产之一。其中,不仅埋藏着公司当前业务现状,并且对其深入挖掘后,还能够知道公司未来的发展方向,这就是当前大数据行业的核心动力。
[0003]随着大数据行业的发展,各类数据交付业务越来越复杂,对数据的管理常采用的方法是,将各项数据集中后,提供出各类数据报表。然而,这一方法仅能通过相关负责人的文档或者更原始的口口相传的方式来维护,维护数据产出是,可以需要查询多个相关平台和组件,提高了数据的维护成本。

技术实现思路

[0004]有鉴于此,本专利技术实施例提供了一种数据处理方法、装置、电子设备及存储介质,以解决数据维护成本较高的问题。
[0005]根据第一方面,本专利技术实施例提供了一种数据处理方法,包括:
[0006]获取待处理数据;
[0007]对所述待处理数据进行解析,确定所述待处理数据的属性信息及相关信息;
[0008]聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据。
[0009]本专利技术实施例提供的数据处理方法,通过将待处理数据的属性信息与相关信息进行关联,避免将不同信息割裂分别存储,后续在对目标数据进行查询时,不仅可以得到属性信息还可以得到相关信息,减少了数据的维护成本,解决了数据查询困难以及数据维护困难的问题。
[0010]结合第一方面,在第一方面第一实施方式中,所述聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据,包括:
[0011]将所述待处理数据的属性信息及相关信息映射为预设数据表;
[0012]获取对所述预设数据表中预设信息的修改,确定目标数据表;
[0013]基于所述目标数据表与其他数据表的血缘关系,将所述目标数据表与所述其他数据表进行关联,确定所述目标数据。
[0014]本专利技术实施例提供的数据处理方法,对预设数据表中的预设信息提供修改功能,供数据的使用人员能够更好的查询和维护表的数据信息。
[0015]结合第一方面第一实施方式,在第一方面第二实施方式中,所述基于所述目标数据表与其他数据表的血缘关系,将所述目标数据表与所述其他数据表进行关联,确定所述目标数据,包括:
[0016]对所述目标数据表以及所述其他数据表进行分析,确定所述目标数据表对应的相
关关联信息;
[0017]将所述相关关联信息优化成表之间的血缘关系地图,得到所述目标数据表对应的表血缘关系,以确定所述目标数据。
[0018]本专利技术实施例提供的数据处理方法,对于某一张数据表而言通过血缘关系地图就可以获取其上下游相关的表,不仅关系着任务之间的相互调起,还能够帮助开发人员理解相关表的生成关系及数据来源。
[0019]结合第一方面,在第一方面第三实施方式中,所述聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据,还包括:
[0020]获取所述待处理数据对应的附加信息;
[0021]将所述附加信息与所述待处理数据进行绑定,以得到所述目标数据。
[0022]本专利技术实施例提供的数据处理方法,附加信息可以表示数据的使用人员对于数据的使用心得以及经验之类的信息,通过将附加信息与待处理数据进行绑定,在数据查询时就可以同时获得这些附加信息,极大地提供了公司内部的业务经验传承。
[0023]结合第一方面第三实施方式,在第一方面第四实施方式中,所述获取所述待处理数据对应的附加信息,包括:
[0024]获取所述待处理数据对应的评论信息、项目信息或标签信息中的至少一种。
[0025]本专利技术实施例提供的数据处理方法,通过将评论信息、项目信息或标签信息中的至少一种与待处理数据进行关联,对于后继者而言,就不需要在海量的文档中翻找可能有价值的信息,减少了数据的维护成本,解决了表知识积累的困难。
[0026]结合第一方面,在第一方面第五实施方式中,所述方法还包括:
[0027]获取数据查询请求;
[0028]基于所述数据查询请求,确定相应的数据表的得分值;
[0029]利用所述得分值推荐与所述数据查询请求对应的查询结果。
[0030]本专利技术实施例提供的数据处理方法,利用数据表的得分值向用户进行查询结果的推荐,可以保证查询结果的质量。
[0031]结合第一方面第五实施方式,在第一方面第六实施方式中,所述基于所述数据查询请求,确定相应的数据表的得分值,包括:
[0032]利用所述数据查询请求,确定相应的数据表的位置;
[0033]基于所述数据表的位置对应的权重以及各个所述数据表的浏览次数与读取次数,确定各个所述数据表的得分值。
[0034]本专利技术实施例提供的数据处理方法,各个数据表的得分值随着表的使用情况而改变,可以真实的反应数据仓库中不同表的价值高低,提高了数据推荐的质量,极大地提高了数据相关业务的工作效率。
[0035]根据第二方面,本专利技术实施例还提供了一种数据处理装置,包括:
[0036]获取模块,用于获取待处理数据;
[0037]解析模块,用于对所述待处理数据进行解析,确定所述待处理数据的属性信息及相关信息;
[0038]聚合模块,用于聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据。
[0039]本专利技术实施例提供的数据处理装置,通过将待处理数据的属性信息与相关信息进行关联,避免将不同信息割裂分别存储,后续在对目标数据进行查询时,不仅可以得到属性信息还可以得到相关信息,减少了数据的维护成本,解决了数据查询困难以及数据维护困难的问题。
[0040]根据第三方面,本专利技术实施例提供了一种电子设备,包括:存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行第一方面或者第一方面的任意一种实施方式中所述的数据处理方法。
[0041]根据第四方面,本专利技术实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储计算机指令,所述计算机指令用于使所述计算机执行第一方面或者第一方面的任意一种实施方式中所述的数据处理方法。
附图说明
[0042]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0043]图1是根据本专利技术实施例的数据处理方法的流程图;
[0044]图2是根据本专利技术实施例的数据处理方法的流程图;
[0045]图3是根据本专利技术实施例的数据平台的结构示意图;
[0046]图本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:获取待处理数据;对所述待处理数据进行解析,确定所述待处理数据的属性信息及相关信息;聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据。2.根据权利要求1所述的方法,其特征在于,所述聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据,包括:将所述待处理数据的属性信息及相关信息映射为预设数据表;获取对所述预设数据表中预设信息的修改,确定目标数据表;基于所述目标数据表与其他数据表的血缘关系,将所述目标数据表与所述其他数据表进行关联,确定所述目标数据。3.根据权利要求2所述的方法,其特征在于,所述基于所述目标数据表与其他数据表的血缘关系,将所述目标数据表与所述其他数据表进行关联,确定所述目标数据,包括:对所述目标数据表以及所述其他数据表进行分析,确定所述目标数据表对应的相关关联信息;将所述相关关联信息优化成表之间的血缘关系地图,得到所述目标数据表对应的表血缘关系,以确定所述目标数据。4.根据权利要求1所述的方法,其特征在于,所述聚合所述属性信息及相关信息,得到所述待处理数据对应的目标数据,还包括:获取所述待处理数据对应的附加信息;将所述附加信息与所述待处理数据进行绑定,以得到所述目标数据。5.根据权利要求4所述的方法,其特征在于,所述获取所述待处理数据对应的附加信息,包括:获取所...

【专利技术属性】
技术研发人员:王秦和姜彬
申请(专利权)人:北京自如信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1