一种跨公安边界大数据传输数据不丢失的方法技术

技术编号:23771822 阅读:68 留言:0更新日期:2020-04-12 00:27
本发明专利技术公开了一种跨公安边界大数据传输数据不丢失的方法,包括如下步骤:即时数据实时传输、历史数据汇总传输、数据缺失对比及传输;发明专利技术的有益效果在于,本发明专利技术的方法将数据分为即时数据和历史数据,并且两种数据分别采用实时传输和闲时传输的方式,充分结合了全量数据输出方式和增量数据备份逐条输出方式的优点,实现数据高效的传输至公安内网;本发明专利技术通过制作外网记录表、内网记录表和数据缺失表,确保历史数据在由公安外网传输至公安内网时不会出现丢失,确保所有的数据能够完整的传输至公安内网,方便公安的数据处理。

A method of big data transmission across public security border without losing

【技术实现步骤摘要】
一种跨公安边界大数据传输数据不丢失的方法
本专利技术涉及计算机应用
,尤其涉及一种跨公安边界大数据传输数据不丢失的方法。
技术介绍
基于现在的网络原因和各种异常突发情况,实践表明:在大数据传输过程中,数据丢失是不可以避免的。目前解决数据丢失的主流方案有两种:第一种方案是全量数据输出方法,把公网数据全部导出到存储设备后再通过人工带到公安内网导入。但是,这种方案的实时性比较差、耗时长,且有一段时间系统不能使用,对于时效高的项目不能响应。另外一种方案是增量数据备份逐条输出方法,通过半人工公网和公安网对比丢失数据,然后再次通过公网传输到公安内网。这种方案能够实现间断传输,能够对时效性较高的项目进行响应。但是,这种方案的数据不是连续传输,因此可追溯性交叉,因此无法完全找到丢失数据。
技术实现思路
1.需要解决的技术问题本专利技术需要解决的技术问题在于,提供一种跨公安边界大数据传输数据不丢失的方法,把大量或者海量的数据,通过公网高效和不丢失地传递到公安内网,避免大数据传输过程中的数据流失而造成的不必要的损失本文档来自技高网...

【技术保护点】
1.一种跨公安边界大数据传输数据不丢失的方法,其特征在于,包括如下步骤:/n步骤1,将即时数据直接传输至公安内网;/n步骤2,将历史数据传输至公安公网并做数据加密、压缩处理;/n步骤3,将步骤2进行数据加密和压缩处理的所述历史数据记录,并制作公网记录表;/n步骤4,将所有保存在公安公网的所述历史数据做数据解密,并导入至公安内网;/n步骤5,将步骤3导入至公安内网的所述历史数据记录,并制作内网记录表;/n步骤6,将步骤3的所述公网记录表和步骤5的所述内网记录表对比,如果对应数据无法匹配,则将无法匹配的数据记录并制作数据缺失表;/n步骤7,定期把所述数据缺失表导入公安公网,从公安公网中将缺失数据设...

【技术特征摘要】
1.一种跨公安边界大数据传输数据不丢失的方法,其特征在于,包括如下步骤:
步骤1,将即时数据直接传输至公安内网;
步骤2,将历史数据传输至公安公网并做数据加密、压缩处理;
步骤3,将步骤2进行数据加密和压缩处理的所述历史数据记录,并制作公网记录表;
步骤4,将所有保存在公安公网的所述历史数据做数据解密,并导入至公安内网;
步骤5,将步骤3导入至公安内网的所述历史数据记录,并制作内网记录表;
步骤6,将步骤3的所述公网记录表和步骤5的所述内网记录表对比,如果对应数据无法匹配,则将无法匹配的数据记录并制作数据缺失表;
步骤7,定期把所述数据缺失表导入公安公网,从公安公网中将缺失数据设定成所述即时数据,并按照步骤1处理。


2....

【专利技术属性】
技术研发人员:岳湘黔胡栋江涌姚傲雪
申请(专利权)人:深圳物讯科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1