一种数据处理方法及装置制造方法及图纸

技术编号:30083925 阅读:31 留言:0更新日期:2021-09-18 08:42
本申请公开了一种数据处理方法及装置,方法包括:若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期对基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;获取每个数据提供方的历史权益,历史权益根据每个数据提供方在所有历史数据提供周期的综合权益得到;确定一条或多条备选数据中每条备选数据的置信度,将置信度最高的备选数据作为目标数据,置信度根据提供该条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定;根据目标数据确定基础数据集,并将基础数据集发送给数据接入方,可提升用户查询到的基础数据集的准确度。可提升用户查询到的基础数据集的准确度。可提升用户查询到的基础数据集的准确度。

【技术实现步骤摘要】
一种数据处理方法及装置


[0001]本申请涉及计算机
,尤其涉及一种数据处理方法及装置。

技术介绍

[0002]随着互联网技术的蓬勃发展,一个数据平台通常可以与多个数据提供方合作,以整合得到较为全面的、准确的基础数据集来提供给用户使用,从而提升该数据平台在同类产品中的竞争力;所谓的基础数据集是指:可以被公开的,不涉及敏感信息的数据。在有多个数据提供方的情况下,数据平台在对数据进行整合时,可能会存在数据冲突,所谓的数据冲突可以理解为:针对同一数据项,不同的数据提供方提供了不同的数据值,如:针对商场A的地址,提供方甲提供的数据为A街区,提供方乙提供的数据为B街区。因此,如何高效地对各个数据提供方提供的数据进行整合成了当下的研究热点。

技术实现思路

[0003]本申请实施例提供了一种数据处理方法及装置,可提升数据平台对数据进行融合的效率。
[0004]一方面,本申请实施例提供了一种数据处理方法,包括:
[0005]若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;
[0006]获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;
[0007]确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;
[0008]根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。
[0009]一方面,本申请实施例提供了一种数据处理装置,包括:
[0010]获取单元,用于若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;
[0011]所述获取单元,还用于获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;
[0012]确定单元,用于确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;
[0013]发送单元,用于根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。
[0014]一方面,本申请实施例提供了一种数据平台,包括:
[0015]处理器,适于实现一条或多条计算机程序;
[0016]计算机存储介质,所述计算机存储介质存储有一条或多条计算机程序,所述一条或多条计算机程序适于由所述处理器加载并执行:
[0017]若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。
[0018]一方面,本申请实施例提供了一种存储介质,所述存储介质存储有一条或多条计算机程序,所述一条或多条计算机程序适于由处理器加载并执行:
[0019]若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。
[0020]一方面,本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品包括计算机程序,该计算机程序存储在计算机存储介质中;数据平台的处理器从计算机存储介质中读取该计算机程序,处理器执行该计算机程序,使得数据平台执行:
[0021]若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。
[0022]本申请实施例在目标数据项存在数据冲突时,通过获取该目标数据项对应的各个备选数据,并确定每个备选数据对应的一个或多个数据提供方的历史权益,然后基于该一个或多个数据提供方的历史权益确定每个备选数据的置信度,从而进行数据融合,提高了数据平台提供给用户的数据的准确度。
附图说明
[0023]为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0024]图1a是本申请实施例提供的一种数据平台中的数据流向示意图;
[0025]图1b是本申请实施例提供的一种数据处理系统的示意图;
[0026]图2是本申请实施例提供的一种数据处理方法的流程示意图;
[0027]图3a是本申请实施例提供的一种区块链的结构示意图;
[0028]图3b是本申请实施例提供的一种区块链网络的结构示意图;
[0029]图3c是本申请实施例提供的一种目标数据的确定流程示意图;
[0030]图4是本申请实施例提供的又一种数据处理方法的流程示意图;
[0031]图5是本申请实施例提供的一种数据处理装置的示意图;...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:若接收到数据接入方针对基础数据集的查询请求,获取一个或多个数据提供方中每个数据提供方在目标数据提供周期内,针对所述基础数据集中目标数据项提供的备选数据,得到一条或多条备选数据;获取所述每个数据提供方的历史权益,所述历史权益是根据所述每个数据提供方在所述目标数据提供周期之前的所有历史数据提供周期的综合权益得到的;确定所述一条或多条备选数据中每条备选数据的置信度,并将置信度最高的备选数据作为目标数据,所述每条备选数据的置信度是根据提供所述每条备选数据的一个或多个目标数据提供方中每个目标数据提供方的历史权益确定的;根据所述目标数据确定基础数据集,并将所述基础数据集发送给所述数据接入方。2.根据权利要求1所述的方法,其特征在于,所述确定所述一条或多条备选数据中每条备选数据的置信度,包括:确定提供所述每条备选数据的一个或多个目标数据提供方;获取所述一个或多个目标数据提供方中每个目标数据提供方的历史权益,得到一个或多个历史权益;根据所述一个或多个历史权益,确定所述每条备选数据的置信度。3.根据权利要求2所述的方法,其特征在于,所述目标数据提供周期为第N个数据提供周期,N≥2且N为整数;所述确定提供所述每条备选数据的一个或多个目标数据提供方,包括:获取前N

1个历史数据提供周期中的每个历史数据提供周期内,提供所述每条备选数据的一个或多个数据提供方;将在前N

1个数据提供周期中获取到的提供所述每条备选数据的所有数据提供方,作为所述每条备选数据的一个或多个目标数据提供方。4.根据权利要求1所述的方法,其特征在于,所述方法还包括:确定提供所述目标数据的一个或多个目标数据提供方;若所述目标数据在所有历史数据提供周期未被提供,且在所述目标数据提供周期提供所述目标数据的一个或多个目标数据提供方的数量为一个,基于所述数据接入方对所述目标数据的消费量,确定提供所述目标数据的目标数据提供方的流量权益,所述流量权益与所述数据接入方对所述目标数据的消费量呈正相关趋势;根据所述流量权益,确定所述目标数据提供方在所述目标数据提供周期的综合权益,所述目标数据提供方在所述目标数据提供周期的综合权益与所述流量权益呈正相关趋势。5.根据权利要求4所述的方法,其特征在于,所述目标数据提供方为所述数据接入方,所述方法还包括:基于所述目标数据提供方对所述目标数据的消费量,确定所述目标数据提供方的消费权益,所述消费权益与所述目标数据提供方对所述目标数据的消费量呈正相关趋势;所述根据所述流量权益,确定所述目标数据提供方在所述目标数据提供周期的综合权益,包括:根据所述流量权益和所述消费权益,确定所述目标数据提供方在所述目标数据提供周期的综合权益。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:确定提供所述目标数据的一个或多个目标数据提供方...

【专利技术属性】
技术研发人员:方警边
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1