遥感数据提取方法技术

本发明专利技术涉及遥感通信技术领域，公开了一种遥感数据提取方法

【技术实现步骤摘要】
遥感数据提取方法、装置、设备及存储介质


[0001]本专利技术涉及遥感通信
，尤其涉及一种遥感数据提取方法
、
装置
、
设备及存储介质
。

技术介绍

[0002]随着数据时代的到来，各种信息数据呈现出急速增长的趋势
。
在遥感通信
，卫星的遥感数据一般具有数据量大的特点，由于遥感数据不断积累以及数据信息极为复杂，整个数据集变得越来越难以处理
。
并且由于遥感数据通过多个信道从卫星向地面传输，同一个任务可能在任意位置被拆分为多个数据下传
。
地面接收到的数据可能为多个卫星，不同任务混合的数据
。
如何正确快速的从大量数据中提取出遥感数据，并将其恢复原始任务数据，是遥感数据分析与应用的前提
。
[0003]但是传统的对数据提取大部分采用按照帧头或帧同步字提取，然后按照帧计数进行排序拼接的方式，由于遥感数据时效性在天气预测
、
灾害救援等应用场景中较为重要，该方式对于遥感数据的提取速度仍较慢，降低了遥感数据的时效性
。
[0004]上述内容仅用于辅助理解本专利技术的技术方案，并不代表承认上述内容是现有技术
。

技术实现思路

[0005]本专利技术的主要目的在于提供了一种遥感数据提取方法
、
装置
、
设备及存储介质，旨在解决传统的采用按照帧头或帧同步字提取，然后按照帧计数进行排序拼接的方式对于遥感数据的提取速度仍较慢，降低了遥感数据的时效性的技术问题
。
[0006]为实现上述目的，本专利技术提供了一种遥感数据提取方法，所述方法包括以下步骤：
[0007]对接收到的卫星遥感数据进行索引创建，获得倒排索引数据；
[0008]根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据；
[0009]对所述各帧目标遥感数据进行数据合并，获得可用遥感数据
。
[0010]可选地，所述对接收到的卫星遥感数据进行索引创建，获得倒排索引数据，包括：
[0011]通过消息队列对接收到的卫星遥感数据进行分流，获得分流遥感数据；
[0012]基于
Lucene
库对所述分流遥感数据进行分词处理，获得所述分流遥感数据对应的分词数据；
[0013]根据所述分词数据对所述卫星遥感数据进行索引创建，获得倒排索引数据
。
[0014]可选地，所述根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据，包括：
[0015]根据所述倒排索引数据对所述卫星遥感数据进行帧查询，获得所述卫星遥感数据对应的遥感帧头；
[0016]通过相似度匹配算法对所述遥感帧头和所述倒排索引数据进行相似度匹配，获得
所述遥感帧头和所述倒排索引数据之间的相似度值；
[0017]通过所述相似度值对所述卫星遥感数据中的帧数据进行数据修复，获得各帧目标遥感数据
。
[0018]可选地，所述通过相似度匹配算法对所述遥感帧头和所述倒排索引数据进行相似度匹配，获得所述遥感帧头和所述倒排索引数据之间的相似度值，包括：
[0019]将所述遥感帧头和所述倒排索引数据进行向量映射，获得所述遥感帧头对应的帧头向量和所述倒排索引数据对应的索引向量；
[0020]对所述帧头向量和所述索引向量分别进行向量角度处理，获得所述帧头向量之间的帧向量角度和所述索引向量之间的索引向量角度；
[0021]通过相似度匹配算法对所述帧向量角度和所述索引向量角度进行相似度匹配，获得所述遥感帧头和所述倒排索引数据之间的相似度值
。
[0022]可选地，所述通过所述相似度值对所述卫星遥感数据中的帧数据进行数据修复，获得各帧目标遥感数据，包括：
[0023]判断所述相似度值是否大于预设阈值，将大于所述预设阈值所对应的遥感帧头作为帧头预选点；
[0024]判断相邻帧头预选点之间的帧距离是否达到预设帧长度；
[0025]在存在所述帧距离未达到所述预设帧长度的情况下，按预设数据格式对未达到所述预设帧长度对应的遥感帧头进行数据修正，获得修正后的卫星遥感数据；
[0026]对所述修正后的卫星遥感数据中的帧数据进行数据提取，获得各帧目标遥感数据
。
[0027]可选地，所述对所述各帧目标遥感数据进行数据合并，获得可用遥感数据，包括：
[0028]提取所述卫星遥感数据的任务时间；
[0029]根据所述任务时间对所述各帧目标遥感数据进行排序，获得排序数据；
[0030]对所述排序数据中的各帧数据进行定位，获得所述帧数据在字节中的字节结束位置；
[0031]根据所述字节结束位置对所述排序数据进行数据合并，获得可用遥感数据
。
[0032]可选地，所述根据所述字节结束位置对所述排序数据进行数据合并，获得可用遥感数据，包括：
[0033]根据所述字节结束位置对所述各帧数据进行偏移测算，获得所述各帧数据对应的数据偏移量；
[0034]在所述数据偏移量达到预设偏移量时，对达到所述预设偏移量所对应的各帧数据进行帧截取，获得截取后的帧数据；
[0035]根据所述字节结束位置对所述排序数据和所述截取后的帧数据进行数据合并，获得可用遥感数据
。
[0036]此外，为实现上述目的，本专利技术还提出一种遥感数据提取装置，所述装置包括：
[0037]倒排索引模块，用于对接收到的卫星遥感数据进行索引创建，获得倒排索引数据；
[0038]数据提取模块，用于根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据；
[0039]数据合并模块，用于对所述各帧目标遥感数据进行数据合并，获得可用遥感数据
。
[0040]此外，为实现上述目的，本专利技术还提出一种遥感数据提取设备，所述设备包括：存储器
、
处理器及存储在所述存储器上并可在所述处理器上运行的遥感数据提取程序，所述遥感数据提取程序配置为实现如上文所述的遥感数据提取方法的步骤
。
[0041]此外，为实现上述目的，本专利技术还提出一种存储介质，所述存储介质上存储有遥感数据提取程序，所述遥感数据提取程序被处理器执行时实现如上文所述的遥感数据提取方法的步骤
。
[0042]本专利技术通过对接收到的卫星遥感数据进行索引创建，获得倒排索引数据；然后根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据；最后对所述各帧目标遥感数据进行数据合并，获得可用遥感数据
。
由于本专利技术通过对卫星遥感数据创建倒排索引数据，在对遥感数据进行数据提取时，可通过倒排索引数据找到卫星遥感数据的具体位置，避免了传统的按照帧头提取并按照帧计数进行排序拼接方式的慢速度提取情况，提高了数据提取的效率，从本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种遥感数据提取方法，其特征在于，所述遥感数据提取方法包括：对接收到的卫星遥感数据进行索引创建，获得倒排索引数据；根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据；对所述各帧目标遥感数据进行数据合并，获得可用遥感数据
。2.
如权利要求1所述的遥感数据提取方法，其特征在于，所述对接收到的卫星遥感数据进行索引创建，获得倒排索引数据，包括：通过消息队列对接收到的卫星遥感数据进行分流，获得分流遥感数据；基于
Lucene
库对所述分流遥感数据进行分词处理，获得所述分流遥感数据对应的分词数据；根据所述分词数据对所述卫星遥感数据进行索引创建，获得倒排索引数据
。3.
如权利要求1所述的遥感数据提取方法，其特征在于，所述根据所述倒排索引数据对所述卫星遥感数据进行数据预处理，获得各帧目标遥感数据，包括：根据所述倒排索引数据对所述卫星遥感数据进行帧查询，获得所述卫星遥感数据对应的遥感帧头；通过相似度匹配算法对所述遥感帧头和所述倒排索引数据进行相似度匹配，获得所述遥感帧头和所述倒排索引数据之间的相似度值；通过所述相似度值对所述卫星遥感数据中的帧数据进行数据修复，获得各帧目标遥感数据
。4.
如权利要求3所述的遥感数据提取方法，其特征在于，所述通过相似度匹配算法对所述遥感帧头和所述倒排索引数据进行相似度匹配，获得所述遥感帧头和所述倒排索引数据之间的相似度值，包括：将所述遥感帧头和所述倒排索引数据进行向量映射，获得所述遥感帧头对应的帧头向量和所述倒排索引数据对应的索引向量；对所述帧头向量和所述索引向量分别进行向量角度处理，获得所述帧头向量之间的帧向量角度和所述索引向量之间的索引向量角度；通过相似度匹配算法对所述帧向量角度和所述索引向量角度进行相似度匹配，获得所述遥感帧头和所述倒排索引数据之间的相似度值
。5.
如权利要求4所述的遥感数据提取方法，其特征在于，所述通过所述相似度值对所述卫星遥感数据中的帧数据进行数据修复，获得各帧目标遥感数据，包括：判断所述相似度值是否大于预设阈值，将大于所述预设阈值所对应的遥感帧头作为...

【专利技术属性】
技术研发人员：杜杰，
申请(专利权)人：浙江吉利控股集团有限公司，
类型：发明
国别省市：