数据接收处理方法、装置和计算机设备制造方法及图纸

本申请涉及涉及一种数据接收处理方法、装置和计算机设备，大数据技术领域。所述方法包括：接收待处理数据文件信息；所述待处理数据文件信息包括数据文件标识信息；在各预设类型的数据处理链路中，确定与所述数据文件标识信息相匹配的目标类型的数据处理链路，作为目标数据处理链路；通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理。上述方法可有效的确定待处理文件数据信息对应的目标数据处理链路，进而利用目标数据处理链路对应的处理策略，对上述待处理数据文件信息进行高效准确的处理，提高数据接收处理效率。提高数据接收处理效率。提高数据接收处理效率。

【技术实现步骤摘要】
数据接收处理方法、装置和计算机设备


[0001]本申请涉及大数据
，特别是涉及一种数据接收处理方法、装置和计算机设备。

技术介绍

[0002]目前，资产托管系统通过数据接收的形式每日接入从上交所，深交所及其他各类交易所传来的交易内容。随着托管业务规模的逐步扩大，通过数据接收进入系统的数据量和指令类型都在不断扩张。
[0003]然而，一旦出现极端情况，如业务集中在某一时段提交了大量的指令，往往会造成数据接收的序列堆积，处理速度变慢，需要优先处理的指令也堆积其中，无法进行及时处理。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够高效进行数据处理的数据接收处理方法、装置和计算机设备。
[0005]第一方面，本申请提供了一种数据接收处理方法。所述方法包括：
[0006]接收待处理数据文件信息；所述待处理数据文件信息包括数据文件标识信息；
[0007]在各预设类型的数据处理链路中，确定与所述数据文件标识信息相匹配的目标类型的数据处理链路，作为目标数据处理链路；
[0008]通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理。
[0009]在其中一个实施例中，所述通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理，包括：
[0010]对所述待处理数据文件信息进行解压处理，获得解压数据信息；
[0011]根据数据库处理工具对所述解压数据信息处理，生成数据结果信息；
[0012]当所述数据文件标识信息是目标标识信息时，在所述数据结果信息中，基于数据筛选条件筛选出目标数据结果信息。
[0013]在其中一个实施例中，所述数据接收处理方法还包括：
[0014]在所述数据文件标识信息不满足预设标识识别条件时，将所有所述预设类型的数据处理链路均作为所述目标数据处理链路。
[0015]在其中一个实施例中，所述数据接收处理方法还包括：
[0016]在所述数据文件标识信息不满足预设标识识别条件时，将所述待处理数据文件信息作为验证数据文件信息；
[0017]通过所有所述预设类型的数据处理链路、以及所有所述预设类型的数据处理链路对应的数据处理策略，对所述验证数据文件信息进行处理，获得各所述预设类型的数据处理链路对应的数据处理结果信息；
[0018]根据所述验证数据文件信息的目标数据结果信息，对各所述预设类型的数据处理链路对应的数据处理结果信息进行验证，生成验证信息。
[0019]在其中一个实施例中，所述数据接收处理方法还包括：
[0020]通过中转机将接收到的初始数据文件信息和目标数据文件目录信息进行匹配；
[0021]在匹配成功的情况下，根据数据预处理策略，对所述初始数据文件信息进行处理，得到所述待处理数据文件信息。
[0022]在其中一个实施例中，所述根据数据预处理策略，对所述初始数据文件信息进行处理，得到所述待处理数据文件信息，包括：
[0023]将匹配成功的初始数据文件信息的初始文件格式转换为目标文件格式；
[0024]将所述目标文件格式的初始数据文件信息进行压缩，作为所述待处理数据文件信息。
[0025]在其中一个实施例中，所述数据接收处理方法还包括：
[0026]按照各所述预设类型的数据处理链路对应的处理优先级由高到低进行排序，得到处理方式序列；
[0027]在所述目标数据处理链路出错的情况下，在所述处理方式序列中剔除所述目标数据处理链路，并将剔除所述目标数据处理链路后的处理方式序列中，处理优先级最高的数据处理链路作为目标数据处理链路。
[0028]第二方面，本申请还提供了一种数据接收处理装置。所述装置包括：
[0029]接收模块，用于接收待处理数据文件信息；所述待处理数据文件信息包括数据文件标识信息；
[0030]匹配模块，用于在各预设类型的数据处理链路中，确定与所述数据文件标识信息相匹配的目标类型的数据处理链路，作为目标数据处理链路；
[0031]处理模块，用于通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理。
[0032]在其中一个实施例中，所述处理模块，具体用于：
[0033]对所述待处理数据文件信息进行解压处理，获得解压数据信息；
[0034]根据数据库处理工具对所述解压数据信息处理，生成数据结果信息；
[0035]当所述数据文件标识信息是目标标识信息时，在所述数据结果信息中，基于数据筛选条件筛选出目标数据结果信息。
[0036]在其中一个实施例中，所述数据接收处理装置还包括：
[0037]识别模块，用于在所述数据文件标识信息不满足预设标识识别条件时，将所有所述预设类型的数据处理链路均作为所述目标数据处理链路。
[0038]在其中一个实施例中，所述数据接收处理装置还包括验证模块，所述验证模块具体用于：
[0039]在所述数据文件标识信息不满足预设标识识别条件时，将所述待处理数据文件信息作为验证数据文件信息；
[0040]通过所有所述预设类型的数据处理链路、以及所有所述预设类型的数据处理链路对应的数据处理策略，对所述验证数据文件信息进行处理，获得各所述预设类型的数据处理链路对应的数据处理结果信息；
[0041]根据所述验证数据文件信息的目标数据结果信息，对各所述预设类型的数据处理链路对应的数据处理结果信息进行验证，生成验证信息。
[0042]在其中一个实施例中，所述数据接收处理装置还包括待处理数据文件信息确定模块，所述待处理数据文件信息确定模块具体用于：
[0043]通过中转机将接收到的初始数据文件信息和目标数据文件目录信息进行匹配；
[0044]在匹配成功的情况下，根据数据预处理策略，对所述初始数据文件信息进行处理，得到所述待处理数据文件信息。
[0045]在其中一个实施例中，所述待处理数据文件信息确定模块，具体用于：
[0046]将匹配成功的初始数据文件信息的初始文件格式转换为目标文件格式；
[0047]将所述目标文件格式的初始数据文件信息进行压缩，作为所述待处理数据文件信息。
[0048]在其中一个实施例中，所述数据接收处理装置还包括目标数据处理链路确定模块，所述目标数据处理链路确定模块具体用于：
[0049]按照各所述预设类型的数据处理链路对应的处理优先级由高到低进行排序，得到处理方式序列；
[0050]在所述目标数据处理链路出错的情况下，在所述处理方式序列中剔除所述目标数据处理链路，并将剔除所述目标数据处理链路后的处理方式序列中，处理优先级最高的数据处理链路作为目标数据处理链路。
[0051]第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据接收处理方法，其特征在于，所述方法包括：接收待处理数据文件信息；所述待处理数据文件信息包括数据文件标识信息；在各预设类型的数据处理链路中，确定与所述数据文件标识信息相匹配的目标类型的数据处理链路，作为目标数据处理链路；通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理。2.根据权利要求1所述的数据接收处理方法，其特征在于，所述通过所述目标数据处理链路、以及所述目标数据处理链路对应的数据处理策略，对所述待处理数据文件信息进行处理，包括：对所述待处理数据文件信息进行解压处理，获得解压数据信息；根据数据库处理工具对所述解压数据信息处理，生成数据结果信息；当所述数据文件标识信息是目标标识信息时，在所述数据结果信息中，基于数据筛选条件筛选出目标数据结果信息。3.根据权利要求1所述的数据接收处理方法，其特征在于，所述方法还包括：在所述数据文件标识信息不满足预设标识识别条件时，将所有所述预设类型的数据处理链路均作为所述目标数据处理链路。4.根据权利要求3所述的数据接收处理方法，其特征在于，所述方法还包括：在所述数据文件标识信息不满足所述预设标识识别条件时，将所述待处理数据文件信息作为验证数据文件信息；通过所有所述预设类型的数据处理链路、以及所有所述预设类型的数据处理链路对应的数据处理策略，对所述验证数据文件信息进行处理，获得各所述预设类型的数据处理链路对应的数据处理结果信息；根据所述验证数据文件信息的目标数据结果信息，对各所述预设类型的数据处理链路对应的数据处理结果信息进行验证，生成验证信息。5.根据权利要求1所述的数据接收处理方法，其特征在于，所述方法还包括：通过中转机将接收到的初始数据文件信息和目标数据文件目录信息进行匹配；在匹配成功的情...

【专利技术属性】
技术研发人员：李泽云，张大梅，杨采，徐雷，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：