数据处理方法、装置及设备制造方法及图纸

技术编号:25521676 阅读:17 留言:0更新日期:2020-09-04 17:11
本申请公开了一种数据处理方法、装置及设备,涉及数据处理技术领域,无需耗费人力对业务数据使用手动测试进行校验处理,提高数据校验过程中的处理效率。其中方法包括:响应于数据处理指令,获取业务配置数据对应目标对象的参数字段;将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,所述业务组件中定义有适用于不同业务范围的数据处理模板;基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验。

【技术实现步骤摘要】
数据处理方法、装置及设备
本申请涉及数据处理
,尤其是涉及到一种数据处理方法、装置及设备。
技术介绍
随着互联网技术的高速发展,目前通过线上进行对象选购已经非常普遍,线上对象在发生购买之前,通常需要商家通过配置平台来对对象相应的业务数据进行配置,例如,业务描述数据、业务推广数据、业务资源数据等。而大部分对象对应分类有相似的地方,又有差异的地方,但是涉及到具体应用过程中的业务数据,又有个性化差异。因此,对配置平台的要求能力较高。现有技术中,配置接收到业务数据,并将相应的业务数据进行落库后,随着线上对象的不断增多,对于任何一个对象的增删改,为了保证后续业务数据应用的准确性,需要对落库的业务数据进行校验。然而,数据库中业务数据的往往涉及到大量数据表,如果对大量数据表使用手动测试进行校验处理,需要耗费大量人力,也无法快速响应业务变化,同时,业务数据又具有相似的内容,增加了数据核对中的重复性工作,降低了数据校验过程中的处理效率。
技术实现思路
有鉴于此,本申请提供了一种数据处理方法、装置及设备,主要目的在于解决现有技术中对大量数据表使用手动测试进行核对处理需要耗费大量人力,降低数据校验过程中处理效率的问题。根据本申请的第一个方面,提供了一种数据处理方法,该方法包括:响应于数据处理指令,获取业务配置数据对应目标对象的参数字段;将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,所述业务组件中定义有适用于不同业务范围的数据处理模板;基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验。在本专利技术实施例中,所述不同业务范围的数据处理模板在业务组件中预先映射有相应的业务字段,所述将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,具体包括:从所述目标对象的参数字段中提取出表征目标对象业务范围的参数字段;将所述表征目标对象业务范围的参数字段与所述业务组件中预先映射的业务字段进行匹配,获取适用于目标对象业务范围的业务字段;基于所述适用于目标对象业务范围的业务字段,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板。在本专利技术实施例中,所述数据处理模板中定义有业务数据模板化后的标准落库字段以及所述标准落库字段所使用的校验信息,所述基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验,具体包括:遍历读取所述业务配置数据中与所述标准落库字段相映射的业务数据;基于所述目标对象业务范围的数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足校验信息;若是,则输出所述业务配置数据校验通过的校验结果;否则,输出所述业务配置数据校验失败的校验结果。在本专利技术实施例中,若所述覆盖所述目标对象业务范围的数据处理模板为多个,且多个数据处理模板对应有校验顺序,则所述基于所述目标对象业务范围的数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足校验信息,具体包括:基于所述目标对象业务范围的数据处理模板,确定每个数据处理模板对应的校验信息;按照多个数据处理模板对应的校验顺序,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足每个数据处理模板对应的校验信息。在本专利技术实施例中,所述多个数据处理模板包括第一数据处理模板和第二数据处理模板,所述第一数据处理模板对应的第一校验信息为对落库字段进行格式校验,所述第二数据处理模板对应的第二校验信息为对落库字段进行内容校验,所述按照多个数据处理模板对应的校验顺序,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足每个数据处理模板对应的校验信息,具体包括:利用所述第一数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据的数据格式是否满足第一校验信息;若是,则利用所述第二数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据的数据内容是否满足第二校验信息;否则,输出所述业务配置数据校验失败的校验结果。在本专利技术实施例中,所述利用所述第一数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据的数据格式是否满足第一校验信息,具体包括:基于所述第一数据处理模板,确定用于格式校验的匹配表达式;按照所述用于格式校验的匹配表达式,对所述业务配置数据中与所述标准落库字段相映射的业务数据的数据格式进行一致性匹配。在本专利技术实施例中,所述利用所述第二数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据的数据内容是否满足第二校验信息,具体包括:基于所述第二数据处理模板,从业务数据库中获取标准落库字段对应的字段属性;将所述标准落库字段对应的字段属性与所述落库字段相映射的业务数据中字段对应的字段属性进行一致性匹配。在本专利技术实施例中,在所述将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板之前,所述方法还包括:基于业务模块对应的逻辑功能,将业务模块中通用的逻辑功能抽离成覆盖不同业务范围的业务组件,所述业务组件之间呈串联分布。根据本申请的第二个方面,一种数据处理方法,该方法包括:当检测到业务配置数据的写入操作时,生成并传输数据处理指令,所述数据处理指令携带有所述业务配置数据对应目标对象的参数字段;接收业务配置数据的校验结果,根据所述校验结果中携带的指示信息对所述业务配置数据执行相应操作。在本专利技术实施例中,若所述校验结果为业务配置数据校验通过,则所述根据所述校验结果中携带的指示信息对所述业务配置数据执行相应操作,具体包括:根据所述校验结果中携带的落库信息,对校验通过的业务配置数据进行落库处理;若所述校验结果为业务配置数据校验失败,则所述根据所述校验结果中携带的指示信息对所述业务配置数据执行相应操作,具体包括:根据所述校验结果中携带的校验信息,对校验失败的业务配置数据进行更新处理。根据本申请的第三个方面,提供了一种应用于服务端的数据处理装置,该装置包括:获取单元,用于响应于数据处理指令,获取业务配置数据对应目标对象的参数字段;加载单元,用于将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,所述业务组件中定义有适用于不同业务范围的数据处理模板;校验单元,用于基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验。在本专利技术实施例中,所述不同业务范围的数据处理模板在业务组件中预先映射有相应的业务字段,所述加载单元包括:提取模块,用于从所述目标对象的参数字段中提取出表征目标对象业务范围的参数字段;匹配模块,用于将所述表征目标对象业务范围的参数字段与所述业务组件中预先映射的业务字段进行匹配,本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:/n响应于数据处理指令,获取业务配置数据对应目标对象的参数字段;/n将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,所述业务组件中定义有适用于不同业务范围的数据处理模板;/n基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验。/n

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:
响应于数据处理指令,获取业务配置数据对应目标对象的参数字段;
将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,所述业务组件中定义有适用于不同业务范围的数据处理模板;
基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验。


2.根据权利要求1所述的方法,其特征在于,所述不同业务范围的数据处理模板在业务组件中预先映射有相应的业务字段,所述将所述目标对象的参数字段作为业务组件的入参,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板,具体包括:
从所述目标对象的参数字段中提取出表征目标对象业务范围的参数字段;
将所述表征目标对象业务范围的参数字段与所述业务组件中预先映射的业务字段进行匹配,获取适用于目标对象业务范围的业务字段;
基于所述适用于目标对象业务范围的业务字段,利用所述业务组件加载覆盖所述目标对象业务范围的数据处理模板。


3.根据权利要求1所述的方法,其特征在于,所述数据处理模板中定义有业务数据模板化后的标准落库字段以及所述标准落库字段所使用的校验信息,所述基于所述目标对象业务范围的数据处理模板,对所述业务配置数据进行校验,具体包括:
遍历读取所述业务配置数据中与所述标准落库字段相映射的业务数据;
基于所述目标对象业务范围的数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足校验信息;
若是,则输出所述业务配置数据校验通过的校验结果;否则,输出所述业务配置数据校验失败的校验结果。


4.根据权利要求3所述的方法,其特征在于,若所述覆盖所述目标对象业务范围的数据处理模板为多个,且多个数据处理模板对应有校验顺序,则所述基于所述目标对象业务范围的数据处理模板,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足校验信息,具体包括:
基于所述目标对象业务范围的数据处理模板,确定每个数据处理模板对应的校验信息;
按照多个数据处理模板对应的校验顺序,检测业务配置数据中与所述标准落库字段相映射的业务数据是否满足每个数据处理模板对应的校验信息。


5.根据权利要求4所述的方法,其特征在于,所述多个数据处理模板包括第一数据处理模板和第二数据处理模板,所述第一数据处理模板对应的第一校验信息为对落库字段进行格式校验,所述第二数据处理模板对应的第二校验信息为对落库字段进行内容校验,所述按照多个数...

【专利技术属性】
技术研发人员:李超
申请(专利权)人:口碑上海信息技术有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1