【技术实现步骤摘要】
分布式共享连接的资产静态数据采集方法及系统
[0001]本专利技术涉及IT业务支撑领域,具体涉及分布式共享连接的资产静态数据采集方法及系统。
技术介绍
[0002]当前在信息
,随着计算机和网络技术持续高速发展,企业数字化转型如火如荼,信息系统使用日益广泛,社会经济开始全面数据化,数据已成为企业最重要的核心资产之一。但在实际环境中,企业数据资产往往会爆炸式增长,规模庞大而复杂,分散而不集中,很难有效地对数据进行利用,也就无法通过数据为企业带来更高价值。此外,随着网络安全法、数据安全法等法规的出台,明确了数据所有者应当对敏感、重要数据,尤其是涉及到个人信息安全的数据采取安全防护手段,因此数据治理和安全合规建设亦势在必行。
[0003]数据库作为企业静态数据存储的主要载体,其中可能存放有大量的敏感或重要信息,为了进行数据治理和合规建设,须对数据库资产中的静态数据进行梳理和识别定位,并对敏感或重要数据进行分级分类。
[0004]数据资产测绘系统,即是这样一款数据识别定位、分级分类的辅助企业进行数据运营治理的管 ...
【技术保护点】
【技术特征摘要】
1.分布式共享连接的资产静态数据采集方法,其特征是,包括步骤:S100:分布式部署的探针节点通过连接池客户端向连接池中间件发送携带目标数据源连接配置信息的连接申请;S200:连接池中间件接收连接申请,从目标数据源连接配置信息获取目标数据源的连接路由信息;S300:连接池中间件根据连接路由信息,在其内部的多层级数据源连接池中查找目标数据源的可复用空闲连接,当存在可复用空闲连接,将可复用空闲连接通过连接池客户端分配给探针节点;当不存在可复用空闲连接,则建立新连接并通过连接池客户端分配给探针节点;S400:探针节点获取分配的连接,通过连接池客户端向连接池中间件发送静态数据采集的命令原语;S500:连接池中间件解析命令原语并在目标数据源中进行静态数据采集,采集的静态数据返回给探针节点;同时将该分配的连接作为空闲连接放回多层级数据源连接池。2.如权利要求1所述的分布式共享连接的资产静态数据采集方法,其特征是:步骤S300进一步包括:S310:连接池中间件根据连接路由信息,在其内部的多层级数据源连接池中查找与连接路由信息匹配的二级子池,判断是否存在可复用空闲连接;若存在,执行子步骤S320;否则,执行子步骤S330;S320:将可复用空闲连接分配给探针节点,执行步骤S400;S330:判断目标数据源所属一级父池是否已满,若未满,执行子步骤S340;否则,执行子步骤S350;S340:与目标数据源建立新连接并分配给探针节点,之后执行步骤S400;S350:判断与目标数据源属于同一数据源实例的一级父池中其它二级子池是否存在不可复用空闲连接;若存在,执行子步骤S360;否则,执行子步骤S370;S360:销毁一个不可复用空闲连接,之后执行子步骤S340;S370:连接申请加入请求等待队列,在等待未超时时,一旦有已分配连接被释放并回收,则判断该被回收连接是否可复用,若可复用,将其分配给探针节点;否则,执行步骤S360;S380:在等待超时,仍未有已分配连接被释放并回收,则本次连接申请失败。3.如权利要求2所述的分布式共享连接的资产静态数据采集方法,其特征是:子步骤S360中,所述销毁具体为:当与目标数据源属于同一数据源实例的一级父池存在多个不可复用空闲连接,销毁闲置时间最长的一个不可复用空闲连接。4.如权利要求2所述的分布式共享连接的资产静态数据采集方法,其特征是:子步骤S360中,所述销毁具体为:当与目标数据源属于同一数据源实例的一级父池存在多个不可复用空闲连接,选择数据源连接数量大于1的二级子池中的一个不可复用空闲连接进行销毁。5.如权利要求2所述的分布式共享连接的资产静态数据采集方法,其特征是:根据等待时长将请求等待队列动态划分为不同调度优先权等级,对各调度优先权等级
...
【专利技术属性】
技术研发人员:章明珠,刘超,楚文良,
申请(专利权)人:成都思维世纪科技有限责任公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。