数据处理方法、装置、设备和计算机可读介质制造方法及图纸

技术编号:26762435 阅读:27 留言:0更新日期:2020-12-18 23:11
本公开的实施例公开了数据处理方法、装置、电子设备和计算机可读介质。该方法的一具体实施方式包括:响应于接收到待处理数据,基于待处理数据中的字段信息,确定待处理数据的数据源;基于配置信息和数据源,确定待处理数据的处理方式,其中,配置信息包括至少一个数据源信息与处理方式信息的组合;使用处理方式对待处理数据进行处理,得到处理后的数据;基于处理后的数据中的字段信息,确定处理后的数据所属的数据类别;将处理后的数据加入数据类别对应的数据队列。该实施方式通过使用配置信息确定对来自不同数据源的数据的处理方式,提高了多数据源数据处理的效率。以及,提高了数据源扩展的便利性。

【技术实现步骤摘要】
数据处理方法、装置、设备和计算机可读介质
本公开的实施例涉及计算机
,具体涉及数据处理方法、装置、设备和计算机可读介质。
技术介绍
随着各种业务的线上化,也出现了越来越多的网络信息。这些信息数据可能有多种来源。例如本地的信息、来自信息竞价平台的在线信息等。对来源不同的信息需要有不同的处理方式,即支持多数据源的数据处理方法,以更好的布局网络信息。相关的数据处理技术对多个数据源的数据处理效率低,并且不易于扩展更多的数据源。
技术实现思路
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了数据处理方法、装置、设备和计算机可读介质,来解决以上
技术介绍
部分提到的技术问题。第一方面,本公开的一些实施例提供了一种数据处理方法,该方法包括:响应于接收到待处理数据,基于待处理数据中的字段信息,确定待处理数据的数据源;基于配置信息和数据源,确本文档来自技高网...

【技术保护点】
1.一种数据处理方法,包括:/n响应于接收到待处理数据,基于所述待处理数据中的字段信息,确定所述待处理数据的数据源;/n基于配置信息和所述数据源,确定所述待处理数据的处理方式,其中,所述配置信息包括至少一个数据源信息与处理方式信息的组合;/n使用所述处理方式对所述待处理数据进行处理,得到处理后的数据;/n基于所述处理后的数据中的字段信息,确定所述处理后的数据所属的数据类别;/n将所述处理后的数据加入所述数据类别对应的数据队列。/n

【技术特征摘要】
1.一种数据处理方法,包括:
响应于接收到待处理数据,基于所述待处理数据中的字段信息,确定所述待处理数据的数据源;
基于配置信息和所述数据源,确定所述待处理数据的处理方式,其中,所述配置信息包括至少一个数据源信息与处理方式信息的组合;
使用所述处理方式对所述待处理数据进行处理,得到处理后的数据;
基于所述处理后的数据中的字段信息,确定所述处理后的数据所属的数据类别;
将所述处理后的数据加入所述数据类别对应的数据队列。


2.根据权利要求1所述的方法,其中,所述基于配置信息和所述数据源确定所述待处理数据的处理方式,包括:
基于所述数据源,在所述配置信息中的至少一个数据源信息与处理方式信息的组合中确定一个数据源信息与处理方式信息的组合;
将所述数据源信息和处理方式信息与组合中的处理方式信息表征的处理方式确定为所述待处理数据的处理方式。


3.根据权利要求1所述的方法,其中,所述使用所述处理方式对所述待处理数据进行处理,包括:
将根据所述待处理数据现有的字段确定的新字段添加到所述待处理数据中。


4.根据权利要求1所述的方法,其中,所述使用所述处理方式对所述待处理数据进行处理,包括:
将所述待处理数据中预设的待删除字段删除。


5.根据权利要求1所述的方法,其中,所述方法还包括:
响应于接收到用户输入的更新后的配置信息,将所述更新后的配置信息确定为所述配置信息。


...

【专利技术属性】
技术研发人员:王雨生郭颖王博洋
申请(专利权)人:北京有竹居网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1