业务数据处理方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及大数据技术领域，具体公开了一种业务数据处理方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括：实时获取多个终端设备上同一应用对应的日志文件；基于目标业务标识，对多个日志文件中的业务数据进行过滤，得到目标业务数据；基于目标报文标识，对多个目标业务数据进行匹配，得到多个匹配成功的目标业务数据，对多个匹配成功的目标业务数据进行解析，得到汇总数据；将汇总数据通过网络发送至分析系统，通过分析系统对汇总数据进行数据处理，得到数据处理结果。采用本方法能够将分析系统与终端设备分离，对采集的数据进行数据预处理后通过网络发送到分析系统，可以减少服务器端的负担，提高业务数据处理的效率。率。率。

【技术实现步骤摘要】
业务数据处理方法、装置、计算机设备和存储介质


[0001]本申请涉及大数据
，特别是涉及一种业务数据处理方法、装置、计算机设备、存储介质和计算机程序产品。

技术介绍

[0002]随着信息技术的快速发展，互联网产品的业务量也呈现快速增长的趋势。对于海量数据，单台计算机的处理能力已经远远不够，由此推动了分布式系统的研究和进展，将海量数据源进行任务分割，将分割后的任务分发给多台计算机并行处理，并将并行处理的结果合并为最终的结果。
[0003]传统方案中通常将每个业务数据保存到数据库中，再对数据库中的数据进行调取与统计分析等处理。
[0004]但传统方案依赖于数据库，每一个业务数据都需要先登记流水，在对登记后的数据进行处理，业务处理效率低。

技术实现思路

[0005]基于此，有必要针对上述技术问题，提供一种业务数据处理方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
[0006]第一方面，本申请提供了一种业务数据处理方法。所述方法包括：
[0007]实时获取多个终端设备上同一应用对应的日本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种业务数据处理方法，其特征在于，所述方法包括：实时获取多个终端设备上同一应用对应的日志文件；基于目标业务标识，对多个所述日志文件中的业务数据进行过滤，得到目标业务数据；基于目标报文标识，对多个所述目标业务数据进行匹配，得到多个匹配成功的目标业务数据，对多个所述匹配成功的目标业务数据进行解析，得到汇总数据；将所述汇总数据通过网络发送至分析系统，通过所述分析系统对所述汇总数据进行数据处理，得到数据处理结果。2.根据权利要求1所述的方法，其特征在于，所述基于目标业务标识，对多个所述日志文件中的业务数据进行过滤，得到目标业务数据，包括：获取多个所述日志文件中业务数据的业务标识；当所述目标业务标识与所述业务标识一致时，将所述业务标识对应的业务数据作为目标业务数据。3.根据权利要求1所述的方法，其特征在于，所述基于目标报文标识，对多个所述目标业务数据进行匹配，得到多个匹配成功的目标业务数据，对多个所述匹配成功的目标业务数据进行解析，包括：获取多个所述目标业务数据的报文标识；当所述目标报文标识与所述报文标识一致时，将所述报文标识对应的目标业务数据作为匹配成功的目标业务数据；基于所述目标报文标识，对多个所述匹配成功的目标业务数据进行报文解析。4.根据权利要求1所述的方法，其特征在于，所述通过所述分析系统对所述汇总数据进行数据处理，得到数据处理结果，包括：基于预设目标，通过所述分析系统对所述汇总数据中的多个业务数据进行分析统计，生成对应所述预设目标的数据处理结果。5.根据权利要求4所述的方法，其特征在于，所述方法还包括：通过所述分析系统将多个所述汇总数据记录至数据库。6.一种业务数据处理装置，其特征在于，所述装置包括：日志文件获取模块，用于实时获取多个终端设备上同一应用对应的日志文件；过滤模块，用于基于目标业务标识，对多个所述日志文件中的业务数据进行过滤，得到目标业务数据；匹配...

【专利技术属性】
技术研发人员：赖韬，薛红星，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：