一种船用数据中心的高速数据存储、处理与访问方法技术

技术编号:41874425 阅读:28 留言:0更新日期:2024-07-02 00:26
本发明专利技术公开了一种船用数据中心的高速数据存储、处理与访问方法,该方法包括:数据存储目录规则、文件存储和自动分片规则、文件名与文件信息描述的对应规则、数据存储与处理的异步协同规则、数据自动处理规则、数据去重规则、适配协议变化的规则、紧急任务优先处理规则以及多用户并发数据访问机制。本发明专利技术通过这些规则和机制实现了船用数据中心大流量网络数据的存储、处理与使用的分离,在保证数据存储完整性的同时,大幅提升了处理效率,最大限度的缩短用户等待时间,并同时支持多个用户使用,提升了用户体验,广泛适用于有船舶高速数据采集、存储、处理及使用需求的应用场景。

【技术实现步骤摘要】

本专利技术涉及船舶数据采集、存储、处理与使用领域,具体涉及一种船用数据中心的高速数据存储、处理与访问方法


技术介绍

1、船舶信息系统是一个包含多种类型电子设备的复杂系统,各电子设备或子系统均通过船舶网络交换机进行网络互连和数据交互。船舶信息系统中的网络节点数量众多,因此会有多台交换机提供设备接入来进行网络通信。

2、为实现对每台交换机上各个用户端口数据信息的采集,通常会在每台交换机设置一个镜像端口。该镜像端口将该网络交换机上的其他用户端口的数据进行镜像汇总。通过对镜像端口数据进行采集,可以获取到网络上传输的各种网络数据,对该数据进行存储、处理后,可为用户使用相关数据进行通信故障检测和业务分析提供基础数据支撑。

3、随着网络交换机技术的不断发展,船舶信息系统中陆续采用了新一代网络交换机。新网络交换机的网络端口已经由原来的1g端口升级为10g端口,并且越来越多的设备开始由模拟信号传递转向数字化、网络化,因此船舶系统网络上节点数量与日俱增,网络通信产生的流量也显著增大。

4、基于上述变化,原有船舶网络中主流的千兆速率网络数据本文档来自技高网...

【技术保护点】

1.一种船用数据中心的高速数据存储、处理与访问方法,其特征在于,该方法包括:

2.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,执行数据录取时,选择文件自动分片大小。

3.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,按照设置的录取文件名创建数据录取子目录,并进行文件自动分片,包括:

4.根据权利要求3所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,将录取文件名和对应的文件信息描述写入到索引文件中,包括:

5.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问...

【技术特征摘要】

1.一种船用数据中心的高速数据存储、处理与访问方法,其特征在于,该方法包括:

2.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,执行数据录取时,选择文件自动分片大小。

3.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,按照设置的录取文件名创建数据录取子目录,并进行文件自动分片,包括:

4.根据权利要求3所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,将录取文件名和对应的文件信息描述写入到索引文件中,包括:

5.根据权利要求1所述的船用数据中心的高速数据存储、处理与访问方法,其特征在于,对已经处理过的数据文件进行标识,避免数据的重复处理,...

【专利技术属性】
技术研发人员:吴畅石剑何新星张岿徐俊
申请(专利权)人:中国舰船研究设计中心
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1