本申请公开了一种数据处理方法、装置、存储介质及设备，该方法包括：首先获取包括目标IO数据和目标审计日志数据的待处理的目标交易数据，然后对目标IO数据进行预处理，得到预处理后的目标IO数据和目标交易的交易标识、涉及文件标识、文件读写类型、交易时间；对目标审计日志数据进行预处理，得到预处理后的目标审计日志数据和目标交易的交易标识、交易功能、交易输入信息、交易输出信息、交易时间；接着对预处理后的目标IO数据和目标审计日志数据进行整合处理，得到整合后的目标交易数据，进而对整合后的目标交易数据进行分析处理，得到目标交易的访问文件、访问概率和访问频次，进而可以利用处理结果更为准确的评估出系统运行情况和运营状态。情况和运营状态。情况和运营状态。
【技术实现步骤摘要】
一种数据处理方法、装置、存储介质及设备
[0001]本申请涉及数据处理
，尤其涉及一种数据处理方法、装置、存储介质及设备。
技术介绍
[0002]近年来，随着民航旅客量不断增长，民航计算机交易系统交易量不断攀升，系统的运行、监控和维护要求更高，是否能够准确评估系统运行情况和运营状态，以根据评估结果对系统进行相应的升级改造，来提高系统运行稳定性显得尤为重要。
[0003]目前鉴于民航计算机交易系统高并发、大容量、快速计算以及数据一致性的特点，系统的数据信息存储通常使用特殊的文件型数据库。这种特殊的文件型数据库，文件访问查询及存储写入直接，文件内数据块内容寻址快速，读写性能较高，但系统整体耦合性也很高，导致系统解耦及升级改造时，分析现有业务时困难很多，无法分析出完整交易功能和数据读写关系，进而导致无法准确评估出系统的运行情况和运行状态，不利于进行系统的升级改造。
技术实现思路
[0004]本申请实施例的主要目的在于提供一种数据处理方法、装置、存储介质及设备，能够通过将系统应用的审计日志与操作系统层面的IO数据深度结合并分析积累处理，获得应用各功能的概率与频次数据，从而能够更准确的评估出系统运行情况和运营状态，为对新系统的升级改造提供可靠的分析依据。
[0005]第一方面，本申请实施例提供了一种数据处理方法，包括：
[0006]获取待处理的目标交易数据，所述目标交易数据包括目标IO数据和目标审计日志数据；
[0007]对所述目标IO数据进行预处理，得到预处理后的目标IO数据和所述目标交易的交易标识、涉及文件标识、文件读写类型、交易时间；以及对所述目标审计日志数据进行预处理，得到预处理后的目标审计日志数据和所述目标交易的交易标识、交易功能、交易输入信息、交易输出信息、交易时间；
[0008]对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据；
[0009]对所述整合后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次，完成对所述目标交易数据的处理。
[0010]第二方面，本申请实施例还提供了一种数据处理装置，所述装置包括：
[0011]获取单元，用于获取待处理的目标交易数据，所述目标交易数据包括目标IO数据和目标审计日志数据；
[0012]预处理单元，用于对所述目标IO数据进行预处理，得到预处理后的目标IO数据和所述目标交易的交易标识、涉及文件标识、文件读写类型、交易时间；以及对所述目标审计
日志数据进行预处理，得到预处理后的目标审计日志数据和所述目标交易的交易标识、交易功能、交易输入信息、交易输出信息、交易时间；
[0013]整合单元，用于对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据；
[0014]分析单元，用于对所述整合后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次，完成对所述目标交易数据的处理。
[0015]第三方面，本申请实施例还提供了一种电子设备，所述电子设备包括：处理器和存储器；
[0016]所述存储器，用于存储指令或计算机程序；
[0017]所述处理器，用于执行所述存储器中的所述指令或计算机程序，以使得所述电子设备执行上述数据处理方法中的任意一种实现方式。
[0018]第四方面，本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备执行上述数据处理方法中的任意一种实现方式。
[0019]本申请实施例提供的一种数据处理方法、装置、存储介质及设备，首先获取待处理的目标交易数据，其中，目标交易数据包括目标IO数据和目标审计日志数据，然后对目标IO数据进行预处理，得到预处理后的目标IO数据和目标交易的交易标识、涉及文件标识、文件读写类型、交易时间；以及对目标审计日志数据进行预处理，得到预处理后的目标审计日志数据和目标交易的交易标识、交易功能、交易输入信息、交易输出信息、交易时间；接着，对预处理后的目标IO数据和预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据，进而可以对整合后的目标交易数据进行分析处理，得到目标交易的访问文件、访问概率和访问频次，完成对目标交易数据的处理。可见，由于本申请实施例是通过将目标IO数据和目标审计日志数据进行深度结合预处理、整合以及分析积累处理，获得目标交易的访问文件、访问概率和访问频次，从而能够利用处理结果更准确的评估出系统运行情况和运营状态，为对新系统的升级改造提供可靠的分析依据。
附图说明
[0020]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0021]图1为本申请实施例提供的一种数据处理方法的流程示意图；
[0022]图2为本申请实施例提供的目标审计日志数据的示例图；
[0023]图3为本申请实施例提供的目标IO数据的示例图；
[0024]图4为本申请实施例提供的展示目标交易的访问文件、访问概率和访问频次的示例图；
[0025]图5为本申请实施例提供的一种数据处理装置的组成示意图；
[0026]图6为本申请实施例提供的一种电子设备的基本结构的示意图。
具体实施方式
[0027]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0028]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0029]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0030]需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0031]目前在进行民航计算机交易系统交易数据分析时，通常是分析交易功能和数据文件读写的关系，初看上去这种分析过程并不麻烦，假如系统功能设计之初，软件工程的详细设计文档中如果有数据库(文件)读写的相关设计说明，那么就是文档再整理本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：获取待处理的目标交易数据，所述目标交易数据包括目标IO数据和目标审计日志数据；对所述目标IO数据进行预处理，得到预处理后的目标IO数据和所述目标交易的交易标识、涉及文件标识、文件读写类型、交易时间；以及对所述目标审计日志数据进行预处理，得到预处理后的目标审计日志数据和所述目标交易的交易标识、交易功能、交易输入信息、交易输出信息、交易时间；对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据；对所述整合后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次，完成对所述目标交易数据的处理。2.根据权利要求1所述的方法，其特征在于，在所述对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据之后，所述方法还包括：对所述整合后的目标交易数据进行清洗处理，清除未被完整截取的数据信息，得到整合并清洗后的目标交易数据；所述对所述整合后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次，完成对所述目标交易数据的处理，包括：对所述整合并清洗后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次，完成对所述目标交易数据的处理。3.根据权利要求1所述的方法，其特征在于，所述对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据，包括：根据所述目标交易的交易标识，对所述预处理后的目标IO数据和所述预处理后的目标审计日志数据进行整合处理，得到整合后的目标交易数据。4.根据权利要求1
‑
3任一项所述的方法，其特征在于，在所述对所述整合后的目标交易数据进行分析处理，得到所述目标交易的访问文件、访问概率和访问频次之后，所述方法还包括：展示所述目标交易的访问文件、访问概率和访问频次，以表明所述目标交易与其相关的数据文件的访问信息。5.一种数据处理装置，其特征在于，所述装置包括：获取单元，用于获取待处...
【专利技术属性】
技术研发人员：于嘉，张莉，杨立华，王旭，刘晓辉，
申请(专利权)人：中国民航信息网络股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。