一种元数据采集方法、装置、服务器和计算机可读介质制造方法及图纸

技术编号:19821968 阅读:68 留言:0更新日期:2018-12-19 14:46
本申请提供了一种元数据采集方法、装置、服务器和计算机可读介质,涉及计算机的技术领域,该方法包括:获取元数据监听器监听到的发生变更的元数据的变更信息;基于变更信息确定发生变更的元数据所属的元数据类型;确定与元数据类型相对应的目标元数据采集器,向目标元数据采集器发送采集指令,以使目标元数据采集器对发生变更的元数据进行采集,在本实施例中,在监听到数据源部分元数据发生变更时,针对该部分元数据进行采集的方式,避免了重复性的元数据采集操作,提高了元数据采集的效率,从而实现了元数据的快速采集。

【技术实现步骤摘要】
一种元数据采集方法、装置、服务器和计算机可读介质
本申请涉及计算机的
,尤其是涉及一种元数据采集方法、装置、服务器和计算机可读介质。
技术介绍
元数据管理系统是提升共享、重新获取和理解企业信息资产水平的重要工具,是企业信息管理的润滑剂。如果企业不对元数据进行管理或管理不得当,信息将被丢失或处于隐匿状态而难以被用户使用,数据集成将十分昂贵,不能对业务进行有效支撑。其中,元数据采集是元数据管理系统的核心,亦是整个系统的基础。当前的元数据采集主要分为手动采集和定时采集两种。手动采集是根据数据源信息,利用对应采集器去采集指定数据源中库,表,字段等属性信息。定时采集是按照指定时间去采集上述信息。不论是手动采集还是定时采集,其技术方案如下:配置数据源:配置将要采集的数据源信息,如数据源的IP,端口,用户名,密码等。选择采集器:根据不同的数据源选择不同的采集器进行采集,比如采集Oracle数据源信息,则需要选择Oracle采集器进行元数据的采集。采集元数据:按照事先约定的规则按顺序采集对应元数据信息,比如先采集库相关元数据,然后采集表相关元数据,最后采集字段相关元数据等。上述元数据采集方案具本文档来自技高网...

【技术保护点】
1.一种元数据采集方法,其特征在于,包括:获取元数据监听器监听到的发生变更的元数据的变更信息;基于所述变更信息确定发生变更的元数据所属的元数据类型;确定与所述元数据类型相对应的目标元数据采集器,向所述目标元数据采集器发送采集指令,以使所述目标元数据采集器对所述发生变更的元数据进行采集。

【技术特征摘要】
1.一种元数据采集方法,其特征在于,包括:获取元数据监听器监听到的发生变更的元数据的变更信息;基于所述变更信息确定发生变更的元数据所属的元数据类型;确定与所述元数据类型相对应的目标元数据采集器,向所述目标元数据采集器发送采集指令,以使所述目标元数据采集器对所述发生变更的元数据进行采集。2.根据权利要求1所述的方法,其特征在于,所述元数据类型包括以下至少之一:数据源中的库信息,数据源中的表信息,数据源中的字段信息;所述元数据采集器组中包括以下至少一种元数据采集器:用于采集数据源中库信息的元数据采集器,用于采集数据源中表信息的元数据采集器,用于采集数据源中字段信息的元数据采集器。3.根据权利要求2所述的方法,其特征在于,所述方法还包括:在所述元数据采集器组中的每个元数据采集器首次采集所述数据源的元数据时,关闭所述元数据监听器;在所述元数据采集器组中的所有元数据采集器首次采集所述数据源的元数据之后,开启所述元数据监听器。4.根据权利要求2或3所述的方法,其特征在于,在向所述目标元数据采集器发送采集指令之前,所述目标元数据采集器处于关闭状态。5.根据权利要求2所述的方法,其特征在于,一个数据源对应一个元数据监听器和一个元数据采集器组。6.一种元数据采集装置,其特征在于,包括:获取单元,用于获取元数据监听器监听到的发生变更的元数据的变更信息;第一确定单元,用于基于所述变更信息确定发生变更的元数据所属的元数据类型;第二确定单元...

【专利技术属性】
技术研发人员:曾伟姚玉兰
申请(专利权)人:新华三大数据技术有限公司
类型:发明
国别省市:河南,41

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1