一种智能文件加密传输与数据同步方法及系统技术方案

技术编号:45527305 阅读:25 留言:0更新日期:2025-06-13 17:27
本发明专利技术涉及信息安全与数据同步技术领域,具体提供了一种智能文件加密传输与数据同步方法及装置,具有如下步骤:S1、加密传输,在数据发送节点配置加密端模式,设置目标解密端IP地址与加密密钥参数;S2、数据同步,监控端部署在独立服务器,配置DataX任务模板库与IoTDB连接参数;S3、构建环形心跳检测网络,加密端、解密端和监控端每隔一段时间交换状态信息。与现有技术相比,本发明专利技术能够有效解决传统方案中角色固化、协议单一、同步延迟等问题,在保障数据安全性的同时提升跨网络域文件传输与实时数据同步效率。

【技术实现步骤摘要】

本专利技术涉及信息安全与数据同步,具体提供一种智能文件加密传输与数据同步方法及系统


技术介绍

1、在传统文件传输与数据同步
,现有解决方案普遍存在架构僵化与功能割裂的问题。已有的加密传输系统,虽然实现了基于ssl/tls的安全传输协议,但其加密逻辑与传输通道深度耦合,导致系统扩展性受限,当需要适配ftp、scp等不同传输协议时,必须重构加密模块,这在多协议混合部署场景下会产生高达37%的额外开发成本。另一方面,阿里巴巴开源的datax数据同步工具虽具备异构数据源同步能力,但其基于定时任务的触发机制存在显著缺陷:对于大规模csv文件的增量同步场景,平均有12.6秒的数据延迟,且缺乏对文件到达事件的实时响应能力,导致金融领域高频交易等时效敏感场景下的数据同步合格率仅为83.2%。更严重的是,现有系统普遍采用单一运行模式设计,现有的加密传输装置,无法在同一实例中动态切换加密端、解密端和监控端角色,这使得分布式环境下需要部署三套独立系统,导致运维复杂度指数级增长。

2、这些技术缺陷共同导致了三个行业痛点:跨协议安全传输的架构重构成本高昂、大规模本文档来自技高网...

【技术保护点】

1.一种智能文件加密传输与数据同步方法,其特征在于,具有如下步骤:

2.根据权利要求1所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤S1中,系统监控指定源目录下的文件变更,检测到新文件时自动执行加密处理,加密过程采用CBC模式生成16字节随机初始化向量,密钥通过PBKDF2算法派生增强安全性;

3.根据权利要求2所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤S2中,当解密端完成文件接收后,系统自动解析CSV文件结构,动态生成包含字段映射关系的DataX配置文件,数据同步任务采用异步执行模式,每个任务分配独立线程池资源,最大并发数根据CP...

【技术特征摘要】

1.一种智能文件加密传输与数据同步方法,其特征在于,具有如下步骤:

2.根据权利要求1所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s1中,系统监控指定源目录下的文件变更,检测到新文件时自动执行加密处理,加密过程采用cbc模式生成16字节随机初始化向量,密钥通过pbkdf2算法派生增强安全性;

3.根据权利要求2所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s2中,当解密端完成文件接收后,系统自动解析csv文件结构,动态生成包含字段映射关系的datax配置文件,数据同步任务采用异步执行模式,每个任务分配独立线程池资源,最大并发数根据cpu核心数动态计算,公式为核心数×2+1;

4.根据权利要求3所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s3中,传输链路异常时自动切换备用协议,同时启用加密隧道保障传输安全,数据同步阶段实施写入幂等性设计;

5.一种智...

【专利技术属性】
技术研发人员:张忠凯郑孝青李松孙崇伟王健房子建
申请(专利权)人:浪潮智慧城市科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1