物流调度数据处理方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及数据处理领域，公开了一种物流调度数据处理方法、装置、设备及存储介质，用于提高基于月台效率模型进行物流调度数据分析的准确性。方法包括：对预置的多个物流数据终端进行数据采集，获取异构物流调度数据集合；对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合；通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合；将所述目标数据集合传输至预置的物流数据展示平台。据集合传输至预置的物流数据展示平台。据集合传输至预置的物流数据展示平台。

【技术实现步骤摘要】
物流调度数据处理方法、装置、设备及存储介质


[0001]本专利技术涉及数据处理领域，尤其涉及一种物流调度数据处理方法、装置、设备及存储介质。

技术介绍

[0002]在快递物流行业中，月台效率的统计监控和效率优化,对快递物流时效性具有重要意义，由于在运输过程中，存在很多不确定因素，因此，为了确保货物的安全高效运输，需要采取有效的监管措施，对运输过程进行有效管理。
[0003]现有的月台效率监控模型更新时效慢，开发成本高，数据统计粒度粗，不可追溯到员工级，由于通过监控模型获取的数据为多源获取的异构数据，例如，参与运输操作的车辆数据信息，其影响着整个月台的运作效率，不同的车辆参与装卸需要提供不同的调度优化策略，如果同时对多种异构数据进行分析，数据量较大，使得这类系统方案会存在一定程度的数据缺失、数据难以匹配、准确度难以保障等问题。

技术实现思路

[0004]本专利技术实施例提供了一种物流调度数据处理方法、装置、设备及存储介质，用于提高基于月台效率模型进行数据分析的准确性。
[0005]本专利技术第一方面提供了一种物流调度数据处理方法，包括：对预置的多个物流数据终端进行数据采集，获取异构物流调度数据集合；对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合；通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合；将所述目标数据集合传输至预置的物流数据展示平台。
[0006]可选的，在本专利技术第一方面的第一种实现方式中，所述对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合包括：对所述异构物流调度数据集合进行数据清洗处理，得到候选异构物流调度数据集合；对所述候选异构物流调度数据集合进行格式转换，得到标准化物流调度数据集合。
[0007]可选的，在本专利技术第一方面的第二种实现方式中，所述对所述异构物流调度数据集合进行数据清洗处理，得到候选异构物流调度数据集合包括：根据预设的过滤规则对所述异构物流调度数据集合进行数据过滤处理，得到过滤后的异构物流调度数据集合；根据预设的去噪处理规则对所述过滤后的异构物流调度数据集合进行去噪处理，得到候选异构物流调度数据集合。
[0008]可选的，在本专利技术第一方面的第三种实现方式中，所述根据预设的过滤规则对所述异构物流调度数据集合进行数据过滤处理，得到过滤后的异构物流调度数据集合包括：对所述异构物流调度数据集合进行缺失值分析，得到分析结果；当所述分析结果为存在缺失值时，对所述异构物流调度数据集合进行数据填充处理，得到填充后的异构物流调度数据集合；对所述填充后的异构物流调度数据集合进行异常值剔除处理，得到过滤后的异构
物流调度数据集合。
[0009]可选的，在本专利技术第一方面的第四种实现方式中，所述对所述候选异构物流调度数据集合进行格式转换，得到标准化物流调度数据集合包括：对所述候选异构物流调度数据集合进行扫描，确定对应的数据标识；基于所述数据标识进行转换规则匹配，确定数据转换规则；基于所述数据转换规则对所述候选异构物流调度数据集合进行格式转换处理，得到标准化物流调度数据集合。
[0010]可选的，在本专利技术第一方面的第五种实现方式中，在所述对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合之后，在所述通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合之前，还包括:基于预置的分布式数据库进行数据采集，获取对应的异构数据表；对所述异构数据表进行数据提取处理，得到对应的规范异构物流调度数据集合；基于所述规范异构物流调度数据集合对预置的深度网络模型进行模型训练，得到月台效率模型。
[0011]可选的，在本专利技术第一方面的第六种实现方式中，所述通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合包括：通过所述月台效率模型进行配置信息分析，得到对应的配置信息；基于所述配置信息进行数据转换线程分析，得到多个数据转换线程；对所述标准化物流调度数据集合进行分类处理，得到多个不同类型的标准化数据；基于预设的分配规则对所述多个不同类型的标准化数据进行线程匹配，得到每一类型的所述标准化数据对应的目标数据转换线程；基于每一类型的所述标准化数据对应的目标数据转换线程对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合。
[0012]本专利技术第二方面提供了一种物流调度数据处理装置，包括：采集模块，用于对预置的多个物流数据终端进行数据采集，获取异构物流调度数据集合；处理模块，用于对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合；同构模块，用于通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合；传输模块，用于将所述目标数据集合传输至预置的物流数据展示平台。
[0013]可选的，在本专利技术第二方面的第一种实现方式中，所述处理模块具体包括：清洗单元，用于对所述异构物流调度数据集合进行数据清洗处理，得到候选异构物流调度数据集合；转换单元，用于对所述候选异构物流调度数据集合进行格式转换，得到标准化物流调度数据集合。
[0014]可选的，在本专利技术第二方面的第二种实现方式中，所述清洗单元具体包括：过滤子单元，用于根据预设的过滤规则对所述异构物流调度数据集合进行数据过滤处理，得到过滤后的异构物流调度数据集合；去噪子单元，用于根据预设的去噪处理规则对所述过滤后的异构物流调度数据集合进行去噪处理，得到候选异构物流调度数据集合。
[0015]可选的，在本专利技术第二方面的第三种实现方式中，所述过滤子单元具体用于：对所述异构物流调度数据集合进行缺失值分析，得到分析结果；当所述分析结果为存在缺失值时，对所述异构物流调度数据集合进行数据填充处理，得到填充后的异构物流调度数据集合；对所述填充后的异构物流调度数据集合进行异常值剔除处理，得到过滤后的异构物流调度数据集合。
[0016]可选的，在本专利技术第二方面的第四种实现方式中，所述转换单元具体用于：对所述
候选异构物流调度数据集合进行扫描，确定对应的数据标识；基于所述数据标识进行转换规则匹配，确定数据转换规则；基于所述数据转换规则对所述候选异构物流调度数据集合进行格式转换处理，得到标准化物流调度数据集合。
[0017]可选的，在本专利技术第二方面的第五种实现方式中，所述物流调度数据处理装置还包括：获取模块，用于基于预置的分布式数据库进行数据采集，获取对应的异构数据表；提取模块，用于对所述异构数据表进行数据提取处理，得到对应的规范异构物流调度数据集合；训练模块，用于基于所述规范异构物流调度数据集合对预置的深度网络模型进行模型训练，得到月台效率模型。
[0018]可选的，在本专利技术第二方面的第六种实现方式中，所述同构模块具体用于：通过所述月台效率模型进行配置信息分析，得到对应的配置信息；基于所述配置信息进行数据转换线程分析，得到多个数据转换线程；对所述标准化物流调度数据集合进行分类处理，得到多个不同类型的标准化数据；基于预设的分配规则对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种物流调度数据处理方法，其特征在于，所述方法包括：对预置的多个物流数据终端进行数据采集，获取异构物流调度数据集合；对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合；通过预置的月台效率模型对所述标准化物流调度数据集合进行同构化处理，得到目标数据集合；将所述目标数据集合传输至预置的物流数据展示平台。2.根据权利要求1所述的物流调度数据处理方法，其特征在于，所述对所述异构物流调度数据集合进行标准化处理，得到标准化物流调度数据集合包括：对所述异构物流调度数据集合进行数据清洗处理，得到候选异构物流调度数据集合；对所述候选异构物流调度数据集合进行格式转换，得到标准化物流调度数据集合。3.根据权利要求2所述的物流调度数据处理方法，其特征在于，所述对所述异构物流调度数据集合进行数据清洗处理，得到候选异构物流调度数据集合包括：根据预设的过滤规则对所述异构物流调度数据集合进行数据过滤处理，得到过滤后的异构物流调度数据集合；根据预设的去噪处理规则对所述过滤后的异构物流调度数据集合进行去噪处理，得到候选异构物流调度数据集合。4.根据权利要求3所述的物流调度数据处理方法，其特征在于，所述根据预设的过滤规则对所述异构物流调度数据集合进行数据过滤处理，得到过滤后的异构物流调度数据集合包括：对所述异构物流调度数据集合进行缺失值分析，得到分析结果；当所述分析结果为存在缺失值时，对所述异构物流调度数据集合进行数据填充处理，得到填充后的异构物流调度数据集合；对所述填充后的异构物流调度数据集合进行异常值剔除处理，得到过滤后的异构物流调度数据集合。5.根据权利要求2所述的物流调度数据处理方法，其特征在于，所述对所述候选异构物流调度数据集合进行格式转换，得到标准化物流调度数据集合包括：对所述候选异构物流调度数据集合进行扫描，确定对应的数据标识；基于所述数据标识进行转换规则匹配，确定数据转换规则；基于所述数据转换规则对所述候选异构物流调度数据集合进行格式转换处理，得到标准化物流调度数据集合。6.根据权利要求1所述的物流调度数据处理方法，其特征在于，在所述对所述异构物流调度数据集合进行标准化处理，...

【专利技术属性】
技术研发人员：张浩，聂英春，康元佳，刘镕硕，高书增，
申请(专利权)人：上海东普信息科技有限公司，
类型：发明
国别省市：