一种支撑智慧金融的数据预处理方法和装置制造方法及图纸

本发明专利技术公开了一种支撑智慧金融的数据预处理方法和装置，所述方法包括：获取金融数据，并将所述金融数据存储在源系统的第一数据库；将所述第一数据库中的金融数据迁移到目标系统；将目标系统中的金融数据进行分类。本发明专利技术对获得的原始金融数据进行预处理，将金融数据迁移到目标系统中，并将金融数据转换为统一格式，然后再根据金融数据的类型将金融数据进行分类，有利于提高金融数据的后续处理效率。

Data preprocessing method and device for supporting intelligent finance

The invention discloses a method and apparatus for pretreatment of a data support the financial wisdom, the method comprises: acquiring financial data and the financial data stored in the first database source system; transfers the financial data of the first database to the target system; the goal of financial data in the system classification. The invention of the original financial data pretreatment, the migration of financial data to the target system, and financial data into a unified format, then according to the type of financial data financial data classification, is conducive to improve the efficiency of financial data processing.

【技术实现步骤摘要】

本专利技术涉及数据处理
，特别是涉及一种支撑智慧金融的数据预处理方法和装置。
技术介绍
金融就是资金的流通，智慧金融就是资金更迅速、更高效、更安全的流通。智慧金融在信息社会伴随着社会化网络、物联网和云计算等技术在金融领域的伸入应用，带来的金融体系和商业模式的变革；这种金融变革，推动资金更顺畅的流通，更合理的配置，更安全的使用。在智慧金融的运转中，需要对大量数据进行处理，如何提高对数据的处理效率显得尤为重要。
技术实现思路
本专利技术的目的在于克服现有技术的不足，提供一种支撑智慧金融的数据预处理方法和装置，对金融数据进行预处理，有利于提高后续对金融数据的处理效率。本专利技术的目的是通过以下技术方案来实现的：一种支撑智慧金融的数据预处理方法，包括：获取金融数据，并将所述金融数据存储在源系统的第一数据库；将所述第一数据库中的金融数据迁移到目标系统；将目标系统中的金融数据进行分类。将源系统中的金融数据迁移到目标系统中，包括以下步骤：将所述第一数据库中的金融数据进行格式转换得到第一标准数据文件；接收源系统发送的第一标准数据文件；将所述第一标准数据文件转换为符合第二数据库结构的数据库数据；基于预先导入的映射关系表对所述第二数据库中的待迁移数据进行映射，得到目标数据；所述映射关系表中记录有所述源系统与目标系统的数据映射关系；将所述目标数据进行格式转换，得到第二标准数据文件；将所述第二标准数据文件发送至所述目标系统，由所述目标系统对第二标准数据文件进行格式转换，得到符合所述目标系统中的第三数据库结构的数据库数据。目标系统对第二标准数据文件进行格式转换之后，还包括：对第二标准数据文件中的缺失数据进行填补，空缺值用该属性平均值替代。所述第二标准数据文件为CSV格式文档。所述金融数据包括银行卡交易记录数据、信用卡交易记录数据、理财产品交易记录数据、不动产估值数据和贷款数据。一种支撑智慧金融的数据预处理装置，包括：金融数据获取模块，用于获取金融数据；第一数据存储模块，用于存储金融数据；数据迁移模块，用于将第一数据存储模块中的金融数据迁移到第二数据存储模块；第二数据存储模块，用于存储从第一数据存储模块中迁移过来的金融数据；数据分类模块，用于将第二数据存储模块中的金融数据进行分类。所述金融数据包括银行卡交易记录数据、信用卡交易记录数据、理财产品交易记录数据、不动产估值数据和贷款数据。本专利技术的有益效果是：本专利技术对获得的原始金融数据进行预处理，将金融数据迁移到目标系统中，并将金融数据转换为统一格式，然后再根据金融数据的类型将金融数据进行分类，有利于提高金融数据的后续处理效率。附图说明图1为支撑智慧金融的数据预处理方法的流程图；图2为支撑智慧金融的数据预处理装置的示意图。具体实施方式下面结合附图进一步详细描述本专利技术的技术方案，但本专利技术的保护范围不局限于以下所述。如图1所示，一种支撑智慧金融的数据预处理方法，包括以下步骤：步骤一、获取金融数据，并将所述金融数据存储在源系统的第一数据库。步骤二、将所述第一数据库中的金融数据迁移到目标系统。将源系统中的金融数据迁移到目标系统中，包括以下步骤：将所述第一数据库中的金融数据进行格式转换得到第一标准数据文件；接收源系统发送的第一标准数据文件；将所述第一标准数据文件转换为符合第二数据库结构的数据库数据；基于预先导入的映射关系表对所述第二数据库中的待迁移数据进行映射，得到目标数据；所述映射关系表中记录有所述源系统与目标系统的数据映射关系；将所述目标数据进行格式转换，得到第二标准数据文件；将所述第二标准数据文件发送至所述目标系统，由所述目标系统对第二标准数据文件进行格式转换，得到符合所述目标系统中的第三数据库结构的数据库数据。所述第二数据库的结构与第一数据库的结构可能相同，也可能不同。所述映射关系表由相关人员填写映射关系表模板得到，然后将填写好的映射关系表导入数据迁移模块。目标系统对第二标准数据文件进行格式转换之后，还包括：对第二标准数据文件中的缺失数据进行填补，空缺值用该属性平均值替代。所述第二标准数据文件为CSV格式文档。步骤三、将目标系统中的金融数据进行分类。所述金融数据包括银行卡交易记录数据、信用卡交易记录数据、理财产品交易记录数据、不动产估值数据和贷款数据。所述将目标系统中的金融数据进行分类的方法包括以下两种：方法一，将目标系统中的金融数据按照数据类型进行分类，即将金融数据分为银行卡交易记录数据、信用卡交易记录数据、理财产品交易记录数据、不动产估值数据和贷款数据等；方法二，将目标系统中的金融数据按照数据来源账户进行分类。如图2所示，一种支撑智慧金融的数据预处理装置，包括：金融数据获取模块，用于获取金融数据；第一数据存储模块，用于存储金融数据；数据迁移模块，用于将第一数据存储模块中的金融数据迁移到第二数据存储模块；第二数据存储模块，用于存储从第一数据存储模块中迁移过来的金融数据；数据分类模块，用于将第二数据存储模块中的金融数据进行分类。所述金融数据包括银行卡交易记录数据、信用卡交易记录数据、理财产品交易记录数据、不动产估值数据和贷款数据。以上所述仅是本专利技术的优选实施方式，应当理解本专利技术并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本专利技术的精神和范围，则都应在本专利技术所附权利要求的保护范围内。本文档来自技高网...

【技术保护点】
一种支撑智慧金融的数据预处理方法，其特征在于：包括：获取金融数据，并将所述金融数据存储在源系统的第一数据库；将所述第一数据库中的金融数据迁移到目标系统；将目标系统中的金融数据进行分类。

【技术特征摘要】
1.一种支撑智慧金融的数据预处理方法，其特征在于：包括：获取金融数据，并将所述金融数据存储在源系统的第一数据库；将所述第一数据库中的金融数据迁移到目标系统；将目标系统中的金融数据进行分类。2.根据权利要求1所述的一种支撑智慧金融的数据预处理方法，其特征在于：将源系统中的金融数据迁移到目标系统中，包括以下步骤：将所述第一数据库中的金融数据进行格式转换得到第一标准数据文件；接收源系统发送的第一标准数据文件；将所述第一标准数据文件转换为符合第二数据库结构的数据库数据；基于预先导入的映射关系表对所述第二数据库中的待迁移数据进行映射，得到目标数据；所述映射关系表中记录有所述源系统与目标系统的数据映射关系；将所述目标数据进行格式转换，得到第二标准数据文件；将所述第二标准数据文件发送至所述目标系统，由所述目标系统对第二标准数据文件进行格式转换，得到符合所述目标系统中的第三数据库结构的数据库数据。3.根据权利要求2所述的一种支撑智慧金融的数据预处理方法，其特征在于：目标系统对第二标准...

【专利技术属性】
技术研发人员：曾立军，吴永才，
申请(专利权)人：四川君逸数码科技股份有限公司，
类型：发明
国别省市：四川;51