一种通用的异构数据库字段类型的映射方法及系统技术方案

技术编号:25521555 阅读:23 留言:0更新日期:2020-09-04 17:11
本发明专利技术公开了一种通用的异构数据库字段类型的映射方法及系统,建立一个通用的数据库字段类型标准,做到各个数据库的字段类型都能映射到该字段类型标准中从而达到两个不同的数据库字段之间的转换。通过本发明专利技术通过不同类型字段建立映射,使得建立不同数据源数据集成的通用模型变得容易,能高效地采集多源数据源数据;其标准通过对多种数据库的字段类型进行分析,提取出一套较为通用的,扩展性良好的,统一的字段标准规范。这套标准适用与绝大多数数据库;拓展性强,每个数据库实现对自定义的标准数据类型映射,增加新的数据库支持实现简单,转换准确,快速,通过自定义的标准规范,实现两个数据库字段类型的转换。

【技术实现步骤摘要】
一种通用的异构数据库字段类型的映射方法及系统
本专利技术涉及数据处理领域,特别是涉及一种通用的异构数据库字段类型的映射方法及系统。
技术介绍
目前全球企业系统越来越大,数据的总容量大约是每三年就要翻两番,这种情况下,数据存放可能分布越广,可能会出现同一个系统的数据被放到了不同的数据库中,或者由于要做系统升级换不同的数据库,要做不同数据库之间的数据移植,这时对于应用系统不同的数据库的访问的方法和方式完全不一样,造成了大量的升级工作量和工时。现有大多数系统和数据库应用绑定太紧密,造成系统上许多的不便利。随着计算机数据处理的发展,现阶段存在着大量的异构数据库,他们的异构表现在多个方面,许多的信息系统需要从这些异构数据库中获取数据,异构数据库的差异导致了获取信息的难度,因此需要一种方式来解决多个异构数据库之间的信息集成。
技术实现思路
本专利技术的目的在于克服现有技术的不足,基于现有的设计模式,提供一种通用的异构数据库字段类型的映射方法及系统。本专利技术的专利技术目的是通过以下技术方案实现的:一种通用的异构数据库字段类型的映射方法,其特征在于,包括以下步骤:S1.建立字段类型映射标准;S2.实现各个数据库到标准字段类型的映射;其中,所述步骤S2还包括以下子步骤:S201.判断源字段是否可以映射为标准类型;若是,则执行步骤S202,若否,则对该字段类型进行降级处理或直接抛出异常;S202.判断标准字段类型是否可以转换为目标字段类型;若是,则执行步骤S204;若否,则执行步骤S203;S203.判断低优先级的哈希表中是否存在可以代替的字段类型;若是则执行步骤S204;若否,则抛出异常;S204.输出该字段类型。所述步骤S201具体包括以下子步骤;S2011.断源字段是否可以映射为标准类型;若是,则执行步骤S2012;若否,则执行步骤S2013S2012.通过一个哈希表建立目标字段类型和标准字段类型的映射,并执行步骤S202;S2013.判断目标字段的数据类型的结构和标准字段类型的结构是否一致;若是,则执行步骤S2014,若否则执行步骤S2015;S2014.对他们建立映射关系,保存在较低优先级的哈希表中;S2015.将该目标字段记录到异常队列中。所述步骤S204包括以下子步骤:S2041.将第一数据库中的哈希表将相关的字段类型转换成标准的字段类型;S2041.通过第二数据库中的哈希表,将标准的字段类型转换成第二数据库对应的字段类型。一种通用的异构数据库字段类型的映射系统,包括第一数据库、第二数据库、字段类型标准库模块和字段类型映射模块;所述第一数据库与第二数据库通过字段类型映射模块对不同类型字段建立映射,并通过字段类型标注库模块进行字段类型转换。所述第一数据库与第二数据库为异构数据库。本专利技术的有益效果:(1)通过不同类型字段建立映射,使得建立不同数据源数据集成的通用模型变得容易,能高效地采集多源数据源数据;(2)其标准通过对多种数据库的字段类型进行分析,提取出一套较为通用的,扩展性良好的,统一的字段标准规范。这套标准适用与绝大多数数据库;(3)拓展性强,每个数据库实现对自定义的标准数据类型映射,增加新的数据库支持实现简单,转换准确,快速,通过自定义的标准规范,实现两个数据库字段类型的转换。附图说明图1为本专利技术的方法流程框图;图2为本专利技术的系统流程框图。具体实施方式为了对本专利技术的技术特征、目的和效果有更加清楚的理解,现对照附图说明本专利技术的具体实施方式,但本专利技术的保护范围不局限于以下所述。如图1,一种通用的异构数据库字段类型的映射方法,包括以下步骤:S1.建立字段类型映射标准;S2.实现各个数据库到标准字段类型的映射;S3.判断源字段是否可以映射为标准类型;若是,则执行步骤S4,若否,则对该字段类型进行降级处理或直接抛出异常;S4.判断标准字段类型是否可以转换为目标字段类型;若是,则执行步骤S6;若否,则执行步骤S5;S5;判断低优先级的哈希表中是否存在可以代替的字段类型;若是则执行步骤S6;若否,则抛出异常;S6;输出该字段类型。所述步骤S3具体包括以下子步骤;S301.断源字段是否可以映射为标准类型;若是,则执行步骤S302;若否,则执行步骤S303S302.通过一个哈希表建立目标字段类型和标准字段类型的映射,并执行步骤S4;S303.判断目标字段的数据类型的结构和标准字段类型的结构是否一致;若是,则执行步骤S304,若否则执行步骤S305;S304.对他们建立映射关系,保存在较低优先级的哈希表中;S305.将该目标字段记录到异常队列中。所述步骤S6包括以下子步骤:S601.将第一数据库中的哈希表将相关的字段类型转换成标准的字段类型;S602.通过第二数据库中的哈希表,将标准的字段类型转换成第二数据库对应的字段类型。如图2,一种通用的异构数据库字段类型的映射系统,一种通用的异构数据库字段类型的映射系统,包括第一数据库、第二数据库、字段类型标准库模块和字段类型映射模块;所述第一数据库与第二数据库通过字段类型映射模块对不同类型字段建立映射,并通过字段类型标注库模块进行字段类型转换。所述第一数据库与第二数据库为异构数据库。本实施例的具体原理如下:1.建立一个通用的兼容各个数据库的字段类型标准规范,相关标准如下:1.1CHAR表示定长字符;1.2VARCHAR表示变长字符;1.3SMALLINT表示2字节整型;1.4INT表示4字节整型;1.5LONG表示8字节整型;1.6FLOAT表示单精度浮点;1.7DOUBLE表示双精度浮点;1.8DATE表示日期;1.9TIME表示时间;1.10TIMESTAMP表示日期+时间;1.11TEXT表示文本;1.12BLOB表示二进制数据;1.13DECIMAL表示可变精度;1.14NUMBER表示可控精度。2.依据1中制定的数据类型标准规范,实现数据库到该标准类型的一个映射。2.1对于目标数据库中,存在字段与标准字段类型的匹配,那么通过一个哈希表建立目标字段类型和标准字段类型的映射。2.2对于目标数据库中,存在标准字段类型无法匹配该数据库中的相关字段。a.如果存在目标字段的数据类型的结构和标准字段类型的结构一致,可以对他们建立映射关系,保存在较低优先级的哈希表中。b.如果不存在目标字段的数据类型和结构和标准字段类型的结构一致,那么将该目标字段记录到异常队列中。2.3对于目标数据库中,存在一些该数据库特有的字段类型,无法匹配到标准字段类型。a.如果存在目标字段的本文档来自技高网...

【技术保护点】
1.一种通用的异构数据库字段类型的映射方法,其特征在于,包括以下步骤:/nS1. 建立字段类型映射标准;/nS2. 实现各个数据库到标准字段类型的映射;/n其中,所述步骤S2还包括以下子步骤:/nS201. 判断源字段是否可以映射为标准类型;若是,则执行步骤S202,若否,则对该字段类型进行降级处理或直接抛出异常;/nS202. 判断标准字段类型是否可以转换为目标字段类型;若是,则执行步骤S204;若否,则执行步骤S203;/nS203. 判断低优先级的哈希表中是否存在可以代替的字段类型;若是则执行步骤S204;若否,则抛出异常;/nS204. 输出该字段类型。/n

【技术特征摘要】
1.一种通用的异构数据库字段类型的映射方法,其特征在于,包括以下步骤:
S1.建立字段类型映射标准;
S2.实现各个数据库到标准字段类型的映射;
其中,所述步骤S2还包括以下子步骤:
S201.判断源字段是否可以映射为标准类型;若是,则执行步骤S202,若否,则对该字段类型进行降级处理或直接抛出异常;
S202.判断标准字段类型是否可以转换为目标字段类型;若是,则执行步骤S204;若否,则执行步骤S203;
S203.判断低优先级的哈希表中是否存在可以代替的字段类型;若是则执行步骤S204;若否,则抛出异常;
S204.输出该字段类型。


2.根据权利要求1所述的一种通用的异构数据库字段类型的映射方法,其特征在于,所述步骤S201具体包括以下子步骤;
S2011.断源字段是否可以映射为标准类型;若是,则执行步骤S2012;若否,则执行步骤S2013
S2012.通过一个哈希表建立目标字段类型和标准字段类型的映射,并执行步骤S202;
S2013.判断目标字段的数据类型的...

【专利技术属性】
技术研发人员:刘魁曹亮邓羽平
申请(专利权)人:成都信息工程大学
类型:发明
国别省市:四川;51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1