数据处理方法、装置、系统、计算机可读存储介质制造方法及图纸

技术编号:21034157 阅读:27 留言:0更新日期:2019-05-04 05:23
本公开提供一种数据处理方法,包括:获取请求数据,所述请求数据包括待处理数据和处理规则标识;确定所述处理规则标识对应的至少一个子规则;获取所述至少一个子规则对应的规则数据,其中,所述规则数据能够用于处理所述待处理数据;以及基于所述至少一个子规则对应的规则数据处理所述待处理数据。

【技术实现步骤摘要】
数据处理方法、装置、系统、计算机可读存储介质
本公开涉及计算机
,更具体地,涉及一种数据处理方法、一种数据处理装置、一种数据处理系统、以及一种计算机可读存储介质。
技术介绍
随着进入大数据时代,数据的重要性不言而喻,对于从各种渠道获取的数据通常存在不一致性的问题,因此需要对获取的数据进行处理得到一致性的数据,例如需要对数据进行清洗最终形成结构化的可用的数据,以方便后续进行数据分析。因此,如何提高数据处理过程的灵活性以及处理过程的快捷性成为目前亟需解决的问题。在实现本公开构思的过程中,专利技术人发现现有技术中至少存在如下问题,现有技术的数据处理方式灵活性差,处理过程不够方便快捷。
技术实现思路
有鉴于此,本公开提供了一种优化的数据处理方法和数据处理系统。本公开的一个方面提供了一种数据处理方法,包括:获取请求数据,所述请求数据包括待处理数据和处理规则标识,确定所述处理规则标识对应的至少一个子规则,获取所述至少一个子规则对应的规则数据,其中,所述规则数据能够用于处理所述待处理数据,以及基于所述至少一个子规则对应的规则数据处理所述待处理数据。根据本公开的实施例,上述待处理数据包括:待处理的原数据,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。根据本公开的实施例,上述待处理数据包括:地址数据,所述地址数据能够表征待处理的原数据的存储位置,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述地址数据获取所述待处理的原数据,基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。根据本公开的实施例,上述待处理的原数据包括至少一个数据属性和所述至少一个数据属性对应的至少一个数据内容。根据本公开的实施例,上述确定所述处理规则标识对应的至少一个子规则,包括:基于所述处理规则标识获取配置文件,其中,所述配置文件包括至少一个子规则标识以及对应的至少一个子规则属性,所述子规则属性与所述数据属性相关联,基于所述至少一个子规则标识确定对应的至少一个子规则,其中,所述至少一个子规则对应的规则数据能够用于处理相应的所述数据内容。根据本公开的实施例,上述配置文件还包括:特定规则数据,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:根据所述至少一个子规则对应的规则数据和/或所述特定规则数据处理所述待处理数据。根据本公开的实施例,上述子规则还包括:目标地址和/或目标队列,所述方法还包括:将处理后的所述待处理数据存储至所述目标地址和/或发送至所述目标队列。本公开的另一个方面提供了一种数据处理装置,包括:第一获取模块、确定模块、第二获取模块、处理模块。其中,第一获取模块获取请求数据,所述请求数据包括待处理数据和处理规则标识,确定模块确定所述处理规则标识对应的至少一个子规则,第二获取模块获取所述至少一个子规则对应的规则数据,其中,所述规则数据能够用于处理所述待处理数据,以及处理模块基于所述至少一个子规则对应的规则数据处理所述待处理数据。根据本公开的实施例,上述待处理数据包括:待处理的原数据,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。根据本公开的实施例,上述待处理数据包括:地址数据,所述地址数据能够表征待处理的原数据的存储位置,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述地址数据获取所述待处理的原数据,基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。根据本公开的实施例,上述待处理的原数据包括至少一个数据属性和所述至少一个数据属性对应的至少一个数据内容。根据本公开的实施例,上述确定所述处理规则标识对应的至少一个子规则,包括:基于所述处理规则标识获取配置文件,其中,所述配置文件包括至少一个子规则标识以及对应的至少一个子规则属性,所述子规则属性与所述数据属性相关联,基于所述至少一个子规则标识确定对应的至少一个子规则,其中,所述至少一个子规则对应的规则数据能够用于处理相应的所述数据内容。根据本公开的实施例,上述配置文件还包括:特定规则数据,所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:根据所述至少一个子规则对应的规则数据和/或所述特定规则数据处理所述待处理数据。根据本公开的实施例,上述子规则还包括:目标地址和/或目标队列,所述装置还包括:存储模块,将处理后的所述待处理数据存储至所述目标地址和/或发送至所述目标队列。本公开的另一方面提供了一种计算机可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。根据本公开的实施例,可以至少部分地解决现有技术的数据处理方式灵活性差,处理过程不够方便快捷的问题,并因此可以实现提高数据处理过程的灵活性以及处理过程的快捷性的技术效果。附图说明通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:图1示意性示出了根据本公开实施例的数据处理方法和处理系统的系统架构;图2示意性示出了根据本公开实施例的数据处理方法和处理系统的应用场景;图3示意性示出了根据本公开实施例的数据处理方法的流程图;图4示意性示出了根据本公开另一实施例的数据处理方法的流程图;图5示意性示出了根据本公开实施例的数据处理装置的框图;图6示意性示出了根据本公开另一实施例的数据处理装置的框图;以及图7示意性示出了根据本公开实施例的适于数据处理的计算机系统的方框图。具体实施方式以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或本文档来自技高网...

【技术保护点】
1.一种数据处理方法,包括:获取请求数据,所述请求数据包括待处理数据和处理规则标识;确定所述处理规则标识对应的至少一个子规则;获取所述至少一个子规则对应的规则数据,其中,所述规则数据能够用于处理所述待处理数据;以及基于所述至少一个子规则对应的规则数据处理所述待处理数据。

【技术特征摘要】
1.一种数据处理方法,包括:获取请求数据,所述请求数据包括待处理数据和处理规则标识;确定所述处理规则标识对应的至少一个子规则;获取所述至少一个子规则对应的规则数据,其中,所述规则数据能够用于处理所述待处理数据;以及基于所述至少一个子规则对应的规则数据处理所述待处理数据。2.根据权利要求1所述的方法,其中:所述待处理数据包括:待处理的原数据;所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。3.根据权利要求1所述的方法,其中:所述待处理数据包括:地址数据,所述地址数据能够表征待处理的原数据的存储位置;所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:基于所述地址数据获取所述待处理的原数据;基于所述至少一个子规则对应的规则数据处理所述待处理的原数据。4.根据权利要求2或3所述的方法,其中,所述待处理的原数据包括至少一个数据属性和所述至少一个数据属性对应的至少一个数据内容。5.根据权利要求4所述的方法,其中,所述确定所述处理规则标识对应的至少一个子规则,包括:基于所述处理规则标识获取配置文件,其中,所述配置文件包括至少一个子规则标识以及对应的至少一个子规则属性,所述子规则属性与所述数据属性相关联;基于所述至少一个子规则标识确定对应的至少一个子规则,其中,所述至少一个子规则对应的规则数据能够用于处理相应的所述数据内容。6.根据权利要求5所述的方法,其中:所述配置文件还包括:特定规则数据;所述基于所述至少一个子规则对应的规则数据处理所述待处理数据,包括:根据所述至少一个子规则对应的规则数据和/或所述特定规则数据处理所述待处理数据。7.根据权利要求1所述的方法,其中:所述子规则还包括:目标地址和/或目标队列;所述方法还包括:将处理后的所述待处理数据存储至所述目标地址和/或发送至所述目标队列。8.一种数据处理装置,包括:第一获取模块,获取请求数据,所述请求数据包括待处理数据和处理规则标识;确定模块,确定所述处理规则标识对应的至少一个子规则;第二获取模块,获取所述至少一个子规则对应的规则数据...

【专利技术属性】
技术研发人员:张琪琦
申请(专利权)人:北京京东金融科技控股有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1