System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 外部数据处理方法、装置、设备及存储介质制造方法及图纸_技高网

外部数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:40704404 阅读:2 留言:0更新日期:2024-03-22 11:03
本发明专利技术涉及数据处理技术领域,尤其涉及外部数据处理方法、装置、设备及存储介质,所述方法包括:获取历史标准订单数据以构建数据存储映射关系;获取待处理物流订单数据并进行校验处理;当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,以生成初始物流数据集;对初始物流数据集进行标准化处理,得到多个标准物流信息;逐一对多个标准物流信息进行加密处理,得到多个加密物流信息;基于所构建的数据存储映射关系,将多个加密物流信息存储至对应的数据库;本申请公开的方法,可对待处理物流订单数据进行标准化处理,方便EPR系统进行成本计算,可为后续的结算提供依据,实现不规则订单的统一监控和管理。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种外部数据处理方法、装置、设备及存储介质


技术介绍

1、各个单一客户在不同购物平台下单所形成的物流订单为不规则物流订单,由于不规则物流订单来自不同的购物平台,不同购物平台的信息标注方法各不相同,即无法与epr系统预设的费用计算方式实现统一,导致不规则订单输入至epr系统后,其计算得出的成本会与实际成本之间存在较大的差异,即现有的epr系统无法实现对不规则物流订单数据的统一处理和管理,无法为网点和大客户的结算提供数据支撑和依据,降低了企业整体的运营效率。

2、可见,现有技术还有待改进和提高。


技术实现思路

1、为了克服现有技术的不足,本专利技术的目的在于提供一种外部数据处理方法、装置、设备及存储介质,可对待处理物流订单数据进行标准化处理,确保epr系统所计算的费用正确有效。

2、本专利技术第一方面提供了一种外部数据处理方法,包括:获取历史标准订单数据,根据历史标准订单数据构建数据存储映射关系;获取待处理物流订单数据,对待处理物流订单数据进行校验处理;当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,根据更新信息生成初始物流数据集;对初始物流数据集进行标准化处理,得到多个标准物流信息;逐一对多个标准物流信息进行加密处理,得到多个加密物流信息;基于所构建的数据存储映射关系,将多个加密物流信息存储至对应的数据库中。

3、可选的,在本专利技术第一方面的第一种实施方式中,所述获取历史标准订单数据,根据历史标准订单数据构建数据存储映射关系,具体包括:获取历史标准订单数据,所述历史标准订单数据包括多个历史标准订单;提取历史标准订单中的标准信息,采用正则表达式确认标准信息中的数据量;比较所确认的数据量与预设的数据量阈值,根据比较结果将多张历史标准订单划分为第一类物流信息和第二类物流信息;根据第一类物流信息和第二类物流信息,构建数据存储映射关系。

4、可选的,在本专利技术第一方面的第二种实施方式中,所述根据第一类物流信息和第二类物流信息构建数据存储映射关系,具体包括:在第一类物流信息中,获取与历史标准订单对应的更新节点,并根据更新节点的数量计算与历史标准订单对应的更新次数;采用冒泡排序法,根据更新次数对多个历史标准订单进行排序处理,根据排序结果得到第一指定物流信息;建立第一指定物流信息与缓存数据库之间的第一对应关系,并建立第二类物流信息以及第一类物流信息中除第一指定物流信息外的其他物流信息与关系数据库之间的第二对应关系;整合第一对应关系和第二对应关系,得到数据存储映射关系。

5、可选的,在本专利技术第一方面的第三种实施方式中,所述获取待处理物流订单数据,对待处理物流订单数据进行校验处理,具体包括:获取待处理物流订单数据,基于nlp语言模型提取待处理物流订单数据中的待处理信息;采用预训练的、基于机器学习算法的分类器判断所述待处理信息是否包括所需要的必填信息,所述必填信息至少包括运单号和信息来源;采用正则表达式对运单号进行真实性校验;当待处理信息未包括所需要的必填信息或运单号未通过真实性校验时,则待处理订单数据未通过检验,返回信息错误指令。

6、可选的,在本专利技术第一方面的第四种实施方式中,所述当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,根据更新信息生成初始物流数据集,具体包括:当待处理物流订单数据通过校验时,获取待处理订单数据的业务类型;根据业务类型确认与待处理订单数据对应的审批节点,所述审批节点包括填报节点和至少一个更新节点;获取更新节点反馈的更新信息,根据更新信息生成初始物流数据集,所述初始物流数据集中包括多个初始物流信息。

7、可选的,在本专利技术第一方面的第五种实施方式中,所述对初始物流数据集进行标准化处理,得到多个标准物流信息,具体包括:确认初始物流数据集所包括的、与初始物流信息对应的信息类型;采用kmp算法、根据信息类型查找预设的标准转换表,以得到与信息类型对应的单位转换函数;采用对应的单位转换函数逐一对多个初始物流信息进行单位转换处理,得到多个标准物流信息。

8、可选的,在本专利技术第一方面的第六种实施方式中,所述逐一对多个标准物流信息进行加密处理,得到多个加密物流信息,具体包括:使用加密库生成与标准物流信息对应的rsa密钥,并以pem格式存储所生成的rsa密钥;采用rsa加密算法、所生成的rsa密钥,基于密码块链接模式对标准物流信息进行加密处理,得到多个加密物流信息;当到达预设的更新时间时,更新与标准物流信息对应的rsa密钥,并存储。

9、本专利技术第二方面提供了一种外部数据处理装置,包括:获取模块,用于获取历史标准订单数据,根据历史标准订单数据构建数据存储映射关系;校验模块,用于获取待处理物流订单数据,对待处理物流订单数据进行校验处理;更新模块,用于当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,根据更新信息生成初始物流数据集;处理模块,用于对初始物流数据集进行标准化处理,得到多个标准物流信息;加密模块,用于逐一对多个标准物流信息进行加密处理,得到多个加密物流信息;存储模块,用于基于所构建的数据存储映射关系,将多个加密物流信息存储至对应的数据库中。

10、可选的,在本专利技术第二方面的第一种实现方式中,所述获取模块包括:第一获取单元,用于获取历史标准订单数据,所述历史标准订单数据包括多个历史标准订单;提取单元,用于提取历史标准订单中的标准信息,采用正则表达式确认标准信息中的数据量;比较单元,用于比较所确认的数据量与预设的数据量阈值,根据比较结果将多张历史标准订单划分为第一类物流信息和第二类物流信息;构建单元,用于根据第一类物流信息和第二类物流信息,构建数据存储映射关系。

11、可选的,在本专利技术第二方面的第二种实现方式中,所述获取模块还包括:第二获取单元,用于在第一类物流信息中,获取与历史标准订单对应的更新节点,并根据更新节点的数量计算与历史标准订单对应的更新次数;排序单元,用于采用冒泡排序法,根据更新次数对多个历史标准订单进行排序处理,根据排序结果得到第一指定物流信息;建立单元,用于建立第一指定物流信息与缓存数据库之间的第一对应关系,并建立第二类物流信息以及第一类物流信息中除第一指定物流信息外的其他物流信息与关系数据库之间的第二对应关系;整合单元,用于整合第一对应关系和第二对应关系,得到数据存储映射关系。

12、可选的,在本专利技术第二方面的第三种实现方式中,所述校验模块包括:第三获取单元,用于获取待处理物流订单数据,基于nlp语言模型提取待处理物流订单数据中的待处理信息;判断单元,用于采用预训练的、基于机器学习算法的分类器判断所述待处理信息是否包括所需要的必填信息,所述必填信息至少包括运单号和信息来源;校验单元,用于采用正则表达式对运单号进行真实性校验;返回单元,用于当待处理信息未包括所需要的必填信息或运单号未通过真实性校验时,则待处理订单数据未通过检验,返回本文档来自技高网...

【技术保护点】

1.一种外部数据处理方法,其特征在于,包括:

2.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述获取历史标准订单数据,根据历史标准订单数据构建数据存储映射关系,具体包括:

3.根据权利要求2所述的一种外部数据处理方法,其特征在于,所述根据第一类物流信息和第二类物流信息构建数据存储映射关系,具体包括:

4.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述获取待处理物流订单数据,对待处理物流订单数据进行校验处理,具体包括:

5.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,根据更新信息生成初始物流数据集,具体包括:

6.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述对初始物流数据集进行标准化处理,得到多个标准物流信息,具体包括:

7.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述逐一对多个标准物流信息进行加密处理,得到多个加密物流信息,具体包括:

8.一种外部数据处理装置,其特征在于,包括:

9.一种外部数据处理设备,其特征在于,所述外部数据处理设备包括:存储器和至少一个处理器,所述存储器中存储有指令;

10.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现如权利要求1-7中任一项所述外部数据处理方法的各个步骤。

...

【技术特征摘要】

1.一种外部数据处理方法,其特征在于,包括:

2.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述获取历史标准订单数据,根据历史标准订单数据构建数据存储映射关系,具体包括:

3.根据权利要求2所述的一种外部数据处理方法,其特征在于,所述根据第一类物流信息和第二类物流信息构建数据存储映射关系,具体包括:

4.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述获取待处理物流订单数据,对待处理物流订单数据进行校验处理,具体包括:

5.根据权利要求1所述的一种外部数据处理方法,其特征在于,所述当待处理物流订单数据通过校验时,获取与待处理物流订单数据对应的、审批节点反馈的更新信息,根据更新信息生成初始...

【专利技术属性】
技术研发人员:杜雅丽李波涛
申请(专利权)人:上海东普信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1