本发明专利技术实施例公开了一种数据处理方法和装置，采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于1的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。
【技术实现步骤摘要】
【专利摘要】本专利技术实施例公开了一种数据处理方法和装置，采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于1的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。【专利说明】一种数据处理方法和装置
本专利技术涉及通信网络的数据业务技术，尤其涉及一种数据处理方法和装置。
技术介绍
随着移动通信网络的快速发展，尤其是数据业务的不断开展，运营商将会为用户提供更多的数据管理服务。在传统的业务运营支撑系统?usiness&Operat1n SupportSystem, BOSS)中，所有的话单文件全部保存在存储区域网络(Storage Area Network, SAN)架构下的企业级存储系统中。图1为相关技术中串行的话单读取处理架构图。为了实现对话单业务的批价处理，在图1所示的传统的线性话单读写(I/O)处理架构中，各个应用服务器之间的话单文件需要进行文件传输协议(File Transfer Protocol,FTP)传输。具体地，基于图1所示的线性话单读写处理架构，所述话单数据线性读写处理流程包括:步骤I，话单数据采集；步骤2，话单数据预处理，得到预处理后的话单数据；步骤3，对所述预处理后的话单数据依次进行一次批价、二次批价、三次批价处理，且多次批价处理之间采用FTP方式传输批价处理后的话单数据；步骤4，将批价处理后的话单数据进行分发处理，分发至对应数据库。综上所述，传统的话单数据线性读写处理流程存在如下缺陷:1)对话单数据进行批价处理过程中，多次批价之间采用FTP传输，其传输效率低且会有多个副本文件产生，几次批价就会造成同等倍数的空间浪费；2)计费系统目前利用FTP方式在各功能模块间传输大量数据，存在性能瓶颈；3)传统的话单数据文件占用大量在线存储空间，严重影响处理性能。
技术实现思路
有鉴于此，本专利技术实施例提供一种数据处理方法和装置，能够在有效提高针对话单数据的读写处理效率的同时节省存储空间，从而提高数据处理性能。为达到上述目的，本专利技术实施例的技术方案是这样实现的:本专利技术实施例提供一种数据处理方法，该方法包括:采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于I的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。上述方案中，所述对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录，包括:对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，获得N个批价处理后的话单文件，并对应生成N个批价目录；根据所述N个批价目录删除所述N个批价处理后的话单文件中的重叠部分，得到处理后的N个话单文件。上述方案中，所述方法应用于星形的话单读取处理架构中。上述方案中，所述对所采集的话单数据以话单文件的形式存储于存储设备，包括:将所采集的话单数据以话单文件的形式存储于高性能的网络附属存储器。上述方案中，所述对所述话单文件进行预处理，得到格式化的话单文件，包括:将存储于高性能的网络附属存储器的话单文件转化为话单系统可识别的格式化的话单文件，并将所述格式化的话单文件集中存储在同一目录下。本专利技术实施例还提供一种数据处理装置，所述装置包括采集模块、存储模块、预处理模块、批价处理模块和分发处理模块；所述采集模块，用于采集话单数据；所述存储模块，用于对所采集的话单数据以话单文件的形式存储于存储设备中；还用于将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；所述预处理模块，用于对所述话单文件进行预处理，得到格式化的话单文件；所述批价处理模块，用于对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于I的正整数；所述分发处理模块，用于对所述处理后的N个话单文件进行分发处理，分发到对应数据库。上述方案中，所述批价处理模块包括批价处理单元和删除单元；所述批价处理单元，对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，获得N个批价处理后的话单文件，并对应生成N个批价目录；所述删除单元，用于根据所述N个批价目录删除所述N个批价处理后的话单文件中的重叠部分，得到处理后的N个话单文件。上述方案中，所述装置应用于星形的话单读取处理架构中。上述方案中，所述存储模块，用于将所采集的话单数据以话单文件的形式存储于高性能的网络附属存储器。上述方案中，所述预处理模块，用于将存储于高性能的网络附属存储器的话单文件转化为话单系统可识别的格式化的话单文件，并将所述格式化的话单文件集中存储在同一目录下。本专利技术实施例所提供的数据处理方法和装置，采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于I的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。如此，能够在有效提高针对话单数据的读写处理效率的同时节省存储空间，从而提高数据处理性能。【附图说明】图1为相关技术中串行的话单读取处理架构图；图2为本专利技术实施例数据处理方法的实现流程示意图；图3为本专利技术实施例星形的话单读取处理架构图；图4为本专利技术实施例对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理的实现流程示意图；图5为本专利技术实施例数据处理装置的组成结构示意图；图6为本专利技术实施例批价处理模块的组成结构示意图。【具体实施方式】在本专利技术实施例中，采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于I的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。下面结合附图及具体实施例对本专利技术再作进一步详细的说明。实施例一图2为本专利技术实施例数据处理方法的实现流程示意图，如图2所示，本专利技术实施例数据处理方法包括:步骤SlOl:采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；具体地，应用于话单系统的数据处理装置实时地或周期性地从交换机上直接采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储本文档来自技高网...
【技术保护点】
一种数据处理方法，其特征在于，所述方法包括：采集话单数据，并对所采集的话单数据以话单文件的形式存储于存储设备中；对所述话单文件进行预处理，得到格式化的话单文件；对所述存储于存储设备中的格式化的话单文件进行并行方式的N次批价处理，得到处理后的N个话单文件和对应的N个批价目录；其中，N的取值为大于1的正整数；将所述处理后的N个话单文件和对应的N个批价目录存储于所述存储设备中；对所述处理后的N个话单文件进行分发处理，分发到对应数据库。
【技术特征摘要】
【专利技术属性】
技术研发人员：苏伟杰，郑水华，杨孝平，
申请(专利权)人：中国移动通信集团四川有限公司，
类型：发明
国别省市：四川;51
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。