一种获取截面日期全量数据的方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术公开了一种获取截面日期全量数据的方法、装置、电子设备及存储介质，涉及计算机技术领域。该方法的一具体实施方式包括：确定用于计算截面日期全量数据的起始日期，所述起始日期为小于所述截面日期并且距所述截面日期最近的全量数据的归档日期；获取归档日期在所述起始日期和所述截面日期之间的归档数据；按照截面日期的归档数据的初始数据结构，基于起始日期的全量数据，从归档日期在所述起始日期和所述截面日期之间的归档数据中获取各个主键字段的最新数据，得到截面日期的全量数据。该实施方式节省存储空间；提高数据查询和计算的效率，便于清晰直观的了解截面日期的全量数据。

【技术实现步骤摘要】
一种获取截面日期全量数据的方法、装置、电子设备及存储介质
本专利技术涉及计算机
，尤其涉及一种获取截面日期全量数据的方法、装置、电子设备及存储介质。
技术介绍
随着计算机技术的发展，以及互联网和大数据技术的广泛应用，需要存储和处理的数据越来越多。为了充分利用数据，出现了越来越多的管理数据的需求，例如，查询某一日期的截面数据。为了满足用户的查询某一日期的截面数据的需求，现有技术通常的做法是：为每个需要查询的日期保存一个全量数据。这种做法的缺陷是：数据管理系统每日保存一份全量数据，其中有些数据是没有变化的，浪费了大量存储空间。
技术实现思路
有鉴于此，本专利技术实施例提供一种获取截面日期全量数据的方法、装置、电子设备及存储介质，能够节省存储空间；确定尽量小的截面数据计算范围，提高数据查询和计算的效率；使截面日期全量数据按照截面日期的初始数据结构形式排列，数据结构更新，便于清晰直观的了解截面日期的全量数据。为实现上述目的，根据本专利技术实施例的一个方面，提供一种获取截面日期全量数据的方法，包括：确定用于计算截面日期全量数据的起始日期，所述起始日期为小于所述截面日期并且距所述截面日期最近的全量数据的归档日期；获取归档日期在所述起始日期和所述截面日期之间的归档数据；按照截面日期的归档数据的初始数据结构，基于起始日期的全量数据，从归档日期在所述起始日期和所述截面日期之间的归档数据中获取各个主键字段的最新数据，得到截面日期的全量数据。可选的，在所述得到截面日期的全量数据之前，还包括：检查在所述起始日期和所述截面日期之间的归档数据的归档日期是否为连续日期。可选的，在所述确定计算截面日期全量数据的起始日期之前，还包括如下步骤：待归档数据在归档到归档表时，判断所述待归档数据的初始数据结构与所述归档表的数据结构是否一致，若不一致，调整所述待归档数据，使所述待归档数据的数据结构与所述归档表的数据结构一致，同时对所述待归档数据的初始数据结构进行登记。可选的，所述归档日期在所述起始日期和所述截面日期之间的归档数据为增量数据或减量数据。可选的，所述归档日期在所述起始日期和所述截面日期之间的归档数据为减量数据，减量数据所对应的主键字段不再校验。可选的，判断归档日期在所述起始日期和所述截面日期之间的归档数据的数据结构是否与所述截面日期的归档数据的初始数据结构一致，若不一致，则调整归档日期在所述起始日期和所述截面日期之间的归档数据，使其与所述截面日期的归档数据的初始数据结构一致；可选的，判断归档日期在所述起始日期和所述截面日期之间的归档数据的数据结构是否与所述截面日期的归档数据的初始数据结构一致的方法为：判断所述归档表的数据结构与所述截面日期的归档数据的初始数据结构是否一致。可选的，判断所述归档表的数据结构与所述截面日期的归档数据的初始数据结构是否一致的方法为：比较所述归档表的数据结构的主键字段及主键字段之间的排列顺序是否分别与所述截面日期的归档数据的初始数据结构的主键字段及主键字段之间的排列顺序一致，所述主键字段值之间的排列顺序即为主键字段值的栏位信息。可选的，所述归档表的数据结构与所述截面日期归档数据的初始数据结构相比，若所述归档表的数据结构缺少第一主键字段，则在所述第一主键字段所在的栏位上增加空占位，将除所述第一主键字段之外的其他主键字段调整至栏位信息与所述截面日期归档数据的初始数据结构的主键字段的栏位信息一致。可选的，所述归档表的数据结构与所述截面日期归档数据的初始数据结构相比，若所述归档表的数据结构多第二主键字段，则将所述第二主键字段所对应的数据删除或移到最后，将除所述第二主键字段之外的其他主键字段调整至栏位信息与所述截面日期归档数据的初始数据结构的主键字段的栏位信息一致。可选的，所述归档表的数据结构与所述截面日期归档数据的初始数据结构相比，若归档表的数据结构的主键字段的排列顺序不同，则将所述起始日期和所述截面日期之间的归档数据重新排序，使所述起始日期和所述截面日期之间的归档数据的栏位信息与所述截面日期归档数据的初始数据结构的主键字段的栏位信息一致。根据本专利技术实施例的第二个方面，提供一种获取截面日期全量数据的装置，包括：起始日期确定模块，用于确定用于计算截面日期全量数据的起始日期，所述起始日期为小于所述截面日期并且距所述截面日期最近的全量数据的归档日期；归档数据获取模块，用于获取归档日期在所述起始日期和所述截面日期之间的归档数据；截面日期全量数据获取模块，用于按照截面日期的归档数据的初始数据结构，基于起始日期的全量数据，从归档日期在所述起始日期和所述截面日期之间的归档数据中获取各个主键字段的最新数据，得到截面日期的全量数据。根据本专利技术实施例的第三个方面，提供了一种获取截面日期全量数据的电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如以上所述获取截面日期全量数据方法中任一所述的方法。根据本专利技术实施例的第四个方面，提供了一种获取截面日期全量数据的计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如以上所述获取截面日期全量数据方法中任一所述的方法。上述专利技术中的一个实施例具有如下优点或有益效果：全量数据通过计算获取，不需要为每个时间点保存一份全量数据，节省了存储空间；通过选择距距所述截面日期最近的全量数据的归档日期作为计算截面日期全量数据的起始日期，确定了一个尽量小的截面数据计算范围，提高数据查询和计算的效率；截面日期全量数据按照截面日期的数据结构形式排列，数据结构更新，便于清晰直观的了解截面日期的全量数据。上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。附图说明附图用于更好地理解本专利技术，不构成对本专利技术的不当限定。其中：图1是根据本专利技术实施例的获取截面日期全量数据的方法的主要流程的示意图；图2是根据本专利技术实施例的获取截面日期全量数据的方法的主要流程的示意图；图3是根据本专利技术实施例的获取截面日期全量数据的方法的主要流程的示意图；图4是根据本专利技术实施例的获取截面日期全量数据的装置的主要模块的示意图；图5是根据本专利技术实施例的获取截面日期全量数据的装置的示意图；图6是本专利技术实施例可以应用于其中的示例性系统架构图；图7是适于用来实现本专利技术实施例的终端设备的计算机系统的结构示意图。具体实施方式以下结合附图对本专利技术的示范性实施例做出说明，其中包括本专利技术实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本专利技术的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。图1是根据本专利技术实施例的一种获取截面日期全量数据的方法的主要步骤的示意图，如图1所示，本专利技术实施例中的获取截面日期本文档来自技高网...

【技术保护点】
1.一种获取截面日期全量数据的方法，其特征在于，包括：/n确定用于计算截面日期全量数据的起始日期，所述起始日期为小于所述截面日期并且距所述截面日期最近的全量数据的归档日期；/n获取归档日期在所述起始日期和所述截面日期之间的归档数据；/n按照截面日期的归档数据的初始数据结构，基于起始日期的全量数据，从归档日期在所述起始日期和所述截面日期之间的归档数据中获取各个主键字段的最新数据，得到截面日期的全量数据。/n

【技术特征摘要】
1.一种获取截面日期全量数据的方法，其特征在于，包括：
确定用于计算截面日期全量数据的起始日期，所述起始日期为小于所述截面日期并且距所述截面日期最近的全量数据的归档日期；
获取归档日期在所述起始日期和所述截面日期之间的归档数据；
按照截面日期的归档数据的初始数据结构，基于起始日期的全量数据，从归档日期在所述起始日期和所述截面日期之间的归档数据中获取各个主键字段的最新数据，得到截面日期的全量数据。


2.根据权利要求1所述的方法，其特征在于，在所述得到截面日期的全量数据之前，还包括：检查在所述起始日期和所述截面日期之间的归档数据的归档日期是否为连续日期。


3.根据权利要求1所述的方法，其特征在于，在所述确定计算截面日期全量数据的起始日期之前，还包括如下步骤：待归档数据在归档到归档表时，判断所述待归档数据的初始数据结构与所述归档表的数据结构是否一致，若不一致，调整所述待归档数据，使所述待归档数据的数据结构与所述归档表的数据结构一致，同时对所述待归档数据的初始数据结构进行登记。


4.根据权利要求1所述的方法，其特征在于，所述归档日期在所述起始日期和所述截面日期之间的归档数据为增量数据或减量数据。


5.根据权利要求4所述的方法，其特征在于，所述归档日期在所述起始日期和所述截面日期之间的归档数据为减量数据，减量数据所对应的主键字段不再校验。


6.根据权利要求1所述的方法，其特征在于，判断归档日期在所述起始日期和所述截面日期之间的归档数据的数据结构是否与所述截面日期的归档数据的初始数据结构一致，若不一致，则调整归档日期在所述起始日期和所述截面日期之间的归档数据，使其与所述截面日期的归档数据的初始数据结构一致。


7.根据权利要求6所述的方法，其特征在于，判断归档日期在所述起始日期和所述截面日期之间的归档数据的数据结构是否与所述截面日期的归档数据的初始数据结构一致的方法为：判断所述归档表的数据结构与所述截面日期的归档数据的初始数据结构是否一致。


8.根据权利要求7所述的方法，其特征在于，判断所述归档表的数据结构与所述截面日期的归档数据的初始数据结构是否一致的方法为：比较所述归档表的数据结构的主键字段及主键字段之间的排列顺序是否分别与所述截面日期的归档数据的初始数据结构的主键字段及主键字段之间的排列顺序一致，所述主键字段值之间的排列顺序即...

【专利技术属性】
技术研发人员：林谊，魏和，高宏华，邓杨，
申请(专利权)人：中国建设银行股份有限公司，建信金融科技有限责任公司，
类型：发明
国别省市：北京;11