【技术实现步骤摘要】
本专利技术涉及信息安全与数据同步,具体提供一种智能文件加密传输与数据同步方法及系统。
技术介绍
1、在传统文件传输与数据同步
,现有解决方案普遍存在架构僵化与功能割裂的问题。已有的加密传输系统,虽然实现了基于ssl/tls的安全传输协议,但其加密逻辑与传输通道深度耦合,导致系统扩展性受限,当需要适配ftp、scp等不同传输协议时,必须重构加密模块,这在多协议混合部署场景下会产生高达37%的额外开发成本。另一方面,阿里巴巴开源的datax数据同步工具虽具备异构数据源同步能力,但其基于定时任务的触发机制存在显著缺陷:对于大规模csv文件的增量同步场景,平均有12.6秒的数据延迟,且缺乏对文件到达事件的实时响应能力,导致金融领域高频交易等时效敏感场景下的数据同步合格率仅为83.2%。更严重的是,现有系统普遍采用单一运行模式设计,现有的加密传输装置,无法在同一实例中动态切换加密端、解密端和监控端角色,这使得分布式环境下需要部署三套独立系统,导致运维复杂度指数级增长。
2、这些技术缺陷共同导致了三个行业痛点:跨协议安全传输的架构
...【技术保护点】
1.一种智能文件加密传输与数据同步方法,其特征在于,具有如下步骤:
2.根据权利要求1所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤S1中,系统监控指定源目录下的文件变更,检测到新文件时自动执行加密处理,加密过程采用CBC模式生成16字节随机初始化向量,密钥通过PBKDF2算法派生增强安全性;
3.根据权利要求2所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤S2中,当解密端完成文件接收后,系统自动解析CSV文件结构,动态生成包含字段映射关系的DataX配置文件,数据同步任务采用异步执行模式,每个任务分配独立线程池资源
...【技术特征摘要】
1.一种智能文件加密传输与数据同步方法,其特征在于,具有如下步骤:
2.根据权利要求1所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s1中,系统监控指定源目录下的文件变更,检测到新文件时自动执行加密处理,加密过程采用cbc模式生成16字节随机初始化向量,密钥通过pbkdf2算法派生增强安全性;
3.根据权利要求2所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s2中,当解密端完成文件接收后,系统自动解析csv文件结构,动态生成包含字段映射关系的datax配置文件,数据同步任务采用异步执行模式,每个任务分配独立线程池资源,最大并发数根据cpu核心数动态计算,公式为核心数×2+1;
4.根据权利要求3所述的一种智能文件加密传输与数据同步方法,其特征在于,在步骤s3中,传输链路异常时自动切换备用协议,同时启用加密隧道保障传输安全,数据同步阶段实施写入幂等性设计;
5.一种智...
【专利技术属性】
技术研发人员:张忠凯,郑孝青,李松,孙崇伟,王健,房子建,
申请(专利权)人:浪潮智慧城市科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。