遥感数据分布式存储方法和装置及遥感数据读取方法制造方法及图纸

本申请涉及一种遥感数据分布式存储方法和装置及遥感数据读取方法，其中存储方法包括：获取待存储的遥感影像数据，将遥感影像数据分割为一个以上的存储块；将各存储块对应存储至集群式存储单元中，并创建索引文件，将各存储块缓存至分布式缓存层中。通过创建索引文件将分割得到的各存储块对应缓存至分布式缓存层中，使得在进行海量遥感数据的存储时，采用分布式缓存与分布式对象存储技术的结合，有效提高了遥感影像数据整体的存储性能。并且，通过创建索引文件将分割得到的存储块对应缓存至分布式缓存层中，在进行存储数据的读取时优先由分布式缓存层中进行读取，这也就有效提高了数据访问效率，降低了数据访问延时。降低了数据访问延时。降低了数据访问延时。

【技术实现步骤摘要】
遥感数据分布式存储方法和装置及遥感数据读取方法


[0001]本申请涉及遥感数据处理
，尤其涉及一种遥感数据分布式存储方法和装置及遥感数据读取方法。

技术介绍

[0002]近年来我国卫星产业发展蓬勃，随着高分、资源等系列卫星的成功发射，对地观测数据接收量呈几何指数增长，海量遥感数据的有效存储和标准化管理已经成为当前面临重大挑战之一。传统存储方式主要有直连存储、集中式存储。其中，直连存储简单来说就是计算服务器和存储服务器直连，扩展容量有限。集中式存储主要包括SAN存储、NAS存储等，这种结构的存储，计算服务器和存储服务器分离，存储服务器是一个独立的设备，但是所有文件的读写都需经过一个入口(即，控制器)，受控制器影响，集中式存储的扩展能力也是有限的，这就使得在采用上述两种存储方式进行海量遥感数据的存储时存储性能较差。

技术实现思路

[0003]有鉴于此，本申请提出了一种遥感数据分布式存储方法，可以有效提高海量遥感数据的存储性能。
[0004]根据本申请的一方面，提供了一种遥感数据分布式存储方法，包括：
[0005本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种遥感数据分布式存储方法，其特征在于，包括：获取待存储的遥感影像数据，将所述遥感影像数据分割为一个以上的存储块；将各所述存储块对应存储至集群式存储单元中，并创建索引文件，将各所述存储块缓存至分布式缓存层中；其中，所述索引文件用于记录各所述存储块与所述分布式缓存层中的各缓存之间的映射关系。2.根据权利要求1所述的方法，其特征在于，将所述遥感影像数据分割为一个以上的存储块时，各所述存储块的大小相同。3.根据权利要求1所述的方法，其特征在于，将各所述存储块对应存储至集群式存储单元中时采用Ceph分布式存储技术进行存储。4.根据权利要求3所述的方法，其特征在于，采用Ceph分布式存储技术将各所述存储块对应存储至集群式存储单元中时，包括：对各所述存储块配置对应的标识；计算各所述存储块的标识的哈希值，并基于各所述存储块的标识的哈希值得到各所述存储块对应的PG序号；将各所述存储块对应的PG序号映射到所述集群式存储单元的存储服务器中，并将各所述存储块对应存储至相应的所述存储服务器中。5.根据权利要求4所述的方法，其特征在于，将各所述存储块对应的PG序号映射到所述集群式存储单元的存储服务器中时，基于预设的存储策略配置规则进行；其中，所述存储策略配置规则包括：一个所述PG序号映射预设个数的所述存储服务器。6.根据权利要求4所述的方法，其特征在于，创建索引文件，将各所述存储块缓存至分布式缓存层中时，基于对各所述存储块所配置的标识进行。7.根据权利要求1所述的方法，其特征在于，将各所述存储块缓存至分布式缓存...

【专利技术属性】
技术研发人员：贾元攀，李莹，许青云，马丁，谭靖，张哲，
申请(专利权)人：北京航天泰坦科技股份有限公司，
类型：发明
国别省市：