一种自适应性的高效处理海量数据入库的系统及方法技术方案

技术编号:8273677 阅读:311 留言:0更新日期:2013-01-31 06:20
本发明专利技术提供一种自适应性的高效处理海量数据入库的系统及方法。该系统包括数据接入设备、数据库服务器、监控装置和冗余数据库服务器。监控装置采集并存储数据接入设备中的数据积压状况信息以及冗余数据库服务器的运行状态信息,并根据采集的信息改变数据接入与数据入库配比,向冗余数据库服务器发送任务调度指令;冗余数据库服务器根据任务调度指令辅助数据库服务器进行数据入库及存储。本发明专利技术根据数据量的变化动态改变入库配比使其达到自动感知、判断、识别、管理和调度,实现了海量数据入库的负载均衡以及高效、准确、及时入库。

【技术实现步骤摘要】

【技术保护点】
一种自适应性的高效处理海量数据入库的系统,包括数据接入设备和与其连接的数据库服务器,其特征在于,还包括监控装置和冗余数据库服务器;所述监控装置连接所述数据接入设备,包括采集模块和自适应调度模块;所述采集模块负责采集并存储所述数据接入设备中的数据积压状况信息以及所述冗余数据库服务器的运行状态信息;所述自适应调度模块连接所述采集模块,负责根据采集的信息改变数据接入与数据入库配比,并向所述冗余数据库服务器发送任务调度指令;所述冗余数据库服务器分别连接所述监控装置和所述数据接入设备,用于根据所述任务调度指令辅助所述数据库服务器进行数据入库及存储。

【技术特征摘要】

【专利技术属性】
技术研发人员:董雪火一莽翁越龙马楠廉喆史延涛乔赞瑞游书明孙瑞刘超
申请(专利权)人:北京锐安科技有限公司北京市公安局
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1