System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于内外网隔离装置的非结构化对象存储数据同步方法制造方法及图纸_技高网

一种基于内外网隔离装置的非结构化对象存储数据同步方法制造方法及图纸

技术编号:40339021 阅读:7 留言:0更新日期:2024-02-09 14:27
一种基于内外网隔离装置的非结构化对象存储数据同步方法,包括:将非结构化数据文件在发送端网络区域按预设规则切分为多个数据块;在发送端网络区域开发生产程序,将切分后的数据块通过内外网隔离装置提供的驱动程序包,将数据块转化为SQL语句,通过SQL语句穿透隔离装置,按序写入接收端数据库的二进制字段,其中每个数据块附带元信息;在接收端网络区域开发消费程序,按一定时间间隔从接收端数据库的二进制字段读取新增的数据块;消费程序根据每个数据块的元信息,对读取到的数据块进行排序、重新组合,最终还原成原始的非结构化数据文件。本发明专利技术实现了不同网络区域间基于数据库通道的非结构化数据高效传输。

【技术实现步骤摘要】

本专利技术属于计算机网络数据传输,具体涉及一种基于内外网隔离装置的非结构化对象存储数据同步方法


技术介绍

1、当前各企业或组织的网络环境普遍设置了安全隔离区域,用于将核心区域和外围区域进行隔离。但区域之间仍存在数据传输需求。现有网络隔离设备基本只开放数据库连接进行数据访问,无法直接进行大容量非结构化数据的传输,严重制约了区域之间的数据交换。


技术实现思路

1、本专利技术的目的是提供一种跨网络区域非结构化数据传输方法,用于解决不同网络区域间大容量非结构化数据传输的问题。该方法通过网络隔离设备间仅开放的数据库通道进行非结构化数据高速传输。

2、为实现上述专利技术目的,本专利技术采用以下技术方案:

3、一种基于内外网隔离装置的非结构化对象存储数据同步方法,包括如下步骤:

4、将非结构化数据文件在发送端网络区域按预设规则切分为多个数据块,每个数据块大小控制在数据库字段容量限制以下;

5、在发送端网络区域开发生产程序,将切分后的数据块通过内外网隔离装置提供的驱动程序包,将数据块转化为sql语句,通过sql语句穿透隔离装置,按序写入接收端数据库的二进制字段,其中每个数据块附带元信息,所述元信息包括文件id、块id以及序列号;

6、在接收端网络区域开发消费程序,按一定时间间隔从接收端数据库的二进制字段读取新增的数据块;

7、消费程序根据每个数据块的元信息,对读取到的数据块进行排序、重新组合,最终还原成原始的非结构化数据文件

8、进一步的,所述的非结构化数据文件包括音频、视频、图片、文档。

9、进一步的,所述发送端的生产程序将数据块写入数据库前对数据块进行压缩或加密。

10、进一步的,所述元信息中还包括数据块压缩格式、加密方式。

11、进一步的,所述消费程序根据元信息中的序列号对数据块进行排序,按顺序重新组合成原始的非结构化数据文件。

12、进一步的,所述消费程序将组合后的非结构化数据文件存储在接收端网络区域的文件存储系统中。

13、进一步的,所述接收端的生产程序采用数据库触发器的方式监测数据变化,在数据插入后主动通知消费程序拉取新的数据块。

14、本专利技术通过构建生产端将文件分块写入数据库、消费端按序读取数据块的转发模式,实现了不同网络区域间基于数据库通道的非结构化数据高效传输,具有显著的进步作用。

本文档来自技高网...

【技术保护点】

1.一种基于内外网隔离装置的非结构化对象存储数据同步方法,其特征在于,包括如下步骤:

2.如权利要求1所述的方法,其特征在于,所述的非结构化数据文件包括音频、视频、图片、文档。

3.如权利要求1所述的方法,其特征在于,所述发送端的生产程序将数据块写入接收端数据库前对数据块进行压缩或加密。

4.如权利要求1所述的方法,其特征在于,所述元信息中还包括数据块压缩格式、加密方式。

5.如权利要求1所述的方法,其特征在于,所述消费程序根据元信息中的序列号对数据块进行排序,按顺序重新组合成原始的非结构化数据文件。

6.如权利要求1所述的方法,其特征在于,所述消费程序将组合后的非结构化数据文件存储在接收端网络区域的文件存储系统中。

7.如权利要求1所述的方法,其特征在于,所述接收端的生产程序采用数据库触发器的方式监测数据变化,在数据插入后主动通知消费程序拉取新的数据块。

【技术特征摘要】

1.一种基于内外网隔离装置的非结构化对象存储数据同步方法,其特征在于,包括如下步骤:

2.如权利要求1所述的方法,其特征在于,所述的非结构化数据文件包括音频、视频、图片、文档。

3.如权利要求1所述的方法,其特征在于,所述发送端的生产程序将数据块写入接收端数据库前对数据块进行压缩或加密。

4.如权利要求1所述的方法,其特征在于,所述元信息中还包括数据块压缩格式、加密方式。

<...

【专利技术属性】
技术研发人员:汪雄才程明李恩来余明俊陈昌文杨雪张作飞高琦蔡晓龙刘维维
申请(专利权)人:湖北华中电力科技开发有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1