数据处理方法、装置、数据处理设备及存储介质制造方法及图纸

技术编号:28498859 阅读:32 留言:0更新日期:2021-05-19 22:38
本发明专利技术涉及数据处理技术领域,公开了一种数据处理方法、装置、数据处理设备及存储介质,该方法包括:对客户端发送的源数据进行解析,以获得多个原始键值对;确定所述源数据的数据ID,并根据所述数据ID确定多个所述原始键值对各自的路径映射函数;基于多个所述原始键值对各自的路径映射函数,确定本地数据库中多个所述原始键值对各自匹配的目标键及所述目标键的键值存储地址;获取多个所述原始键值对中各自的键值,并根据多个所述原始键值对各自匹配的目标键的键值存储地址分别将各自的键值填充至本地数据库中,由此,相比于目前人工进行解析后的配置,本发明专利技术提出的数据处理方法实现了自动化解析到配置,进而提高了数据处理效率。率。率。

【技术实现步骤摘要】
数据处理方法、装置、数据处理设备及存储介质


[0001]本专利技术涉及数据处理
,尤其涉及一种数据处理方法、装置、数据处理设备及存储介质。

技术介绍

[0002]目前对于数据解析的技术手段越来越成熟,然而在对数据解析之后,仍然需要借用人工对数据解析结果进行配置,然而当数据量过多时,当前基于人工对数据解析结果进行配置的技术手段的数据处理效率过低,因此目前实现自动化数据解析到配置成为本领域的研究热点。

技术实现思路

[0003]本专利技术提供一种数据处理方法、装置、数据处理设备及存储介质,旨在解决目前无法实现自动化数据解析到配置的技术问题。
[0004]为实现上述目的,本专利技术提供一种数据处理方法,应用于服务器,所述方法包括:
[0005]对客户端发送的源数据进行解析,以获得多个原始键值对;
[0006]确定所述源数据的数据ID,并根据所述数据ID确定多个所述原始键值对各自的路径映射函数;
[0007]基于多个所述原始键值对各自的路径映射函数,确定本地数据库中多个所述原始键值对各自匹配的目标键本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法,其特征在于,应用于服务器,所述方法包括:对客户端发送的源数据进行解析,以获得多个原始键值对;确定所述源数据的数据ID,并根据所述数据ID确定多个所述原始键值对各自的路径映射函数;基于多个所述原始键值对各自的路径映射函数,确定本地数据库中多个所述原始键值对各自匹配的目标键及所述目标键的键值存储地址;获取多个所述原始键值对中各自的键值,并根据多个所述原始键值对各自匹配的目标键的键值存储地址分别将各自的键值填充至本地数据库中。2.根据权利要求1所述的数据处理方法,其特征在于,所述根据所述数据ID确定所述原始键值对的路径映射函数的步骤之前,还包括:接收到客户端发送的携带有客户端参数的接入请求时,响应所述接入请求,并基于所述客户端参数配置客户端的源数据的数据ID;获取所述客户端的数据存储类型;基于所述客户端的数据存储类型,构建所述客户端对应的路径映射函数,并关联所述客户端的源数据的数据ID与所述客户端对应的路径映射函数。3.根据权利要求2所述的数据处理方法,其特征在于,所述基于所述客户端的数据存储类型,构建所述客户端对应的路径映射函数的步骤包括:若所述客户端的数据存储类型为非关系型数据存储类型,则发送携带有本地键值对的第一键集合的键获取请求至所述客户端,其中,所述客户端接收到所述携带有本地键值对的第一键集合的键获取请求时,获取客户端键值对的第二键集合,以根据所述客户端键值对的第二键集合及所述本地键值对的第一键集合获取第一键匹配结果,并反馈所述客户端键值对的第二键集合及所述第一键匹配结果;接收客户端反馈的客户端键值对的第二键集合及客户端反馈的第一键匹配结果;基于语义分析获取所述客户端键值对的第二键集合中各第二键与所述本地键值对的第一键集合中各第一键之间的相似度;遍历所述第二键集合中各第二键与所述第一键集合中各第一键之间的相似度,以根据所述相似度获取第二键匹配结果;遍历所述第一键匹配结果及所述第二键匹配结果,以获取所述第一键匹配结果及所述第二键匹配结果中匹配结果一致的目标键对及所述第一键匹配结果和/或所述第二键匹配结果中除所述目标键对之外的异常键对;确定所述异常键对中的第一异常键及第二异常键,并根据所述第一异常键对第二异常键进行修正,以将所述异常键对转换为目标键对;获取所述目标键对中第一键在客户端中的第一键值存储地址及第二键在服务器中的第二键值存储地址,以根据所述第一键值存储地址及所述第二键值存储地址构建所述目标键对对应的路径映射函数。4.根据权利要求2所述的数据处理方法,其特征在于,所述基于所述客户端的数据存储类型,构建所述客户端对应的路径映射函数的步骤包括:若所述客户端的数据存储类型为关系型数据存储类型,则获取服务器键值对的第三键集合;...

【专利技术属性】
技术研发人员:胡东升
申请(专利权)人:平安普惠企业管理有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1