遥感图像的识别方法和装置制造方法及图纸

本说明书实施例提供了遥感图像的识别方法和装置。根据实施例的方法，首先需要得到待识别的遥感图像和文本识别参考数据，并对遥感图像和文本识别参考数据分别进行特征提取得到图像特征和文本特征。然后将图像特征和文本特征进行融合，得到融合特征，进而利用图像识别模型对融合特征进行识别得到遥感图像的识别结果。如此采用多源信息融合的方式，利用文本特征对图像特征进行筛选，能够提升遥感图像的识别精度。

【技术实现步骤摘要】
遥感图像的识别方法和装置
本说明书一个或多个实施例涉及图像处理
，尤其涉及遥感图像的识别方法和装置。
技术介绍
遥感图像是基于成像原理和光谱技术捕获的各类地物连续的光谱数据和空间数据。结合图像处理，对遥感图像进行识别的遥感图像识别技术是现阶段对地物信息进行获取的重要手段。然而，传统的遥感图像识别技术在建立大规模、通用型遥感图像识别系统时，往往需要大量的图像数据才能构建起比较好的特征表达。但在实际应用中并不能完全做到图像数据的全覆盖，因此大大降低了遥感图像的识别精度。此外，由于同一种地物可能对应不同的光谱信息，以及相同的光谱信息可能对应不同的物体，如此也会导致遥感图像的识别精度不高。因此，针对以上不足，需要提供更加精准的遥感图像识别方案。
技术实现思路
本说明书一个或多个实施例描述了遥感图像的识别方法和装置，能够提高遥感图像的识别精度。根据第一方面，提供了遥感图像的识别方法，包括：接收待识别的遥感图像；根据所述待识别的遥感图像的拍摄信息，确定文本识别参考数据；<br>对所述遥感图像本文档来自技高网...

【技术保护点】
1.遥感图像的识别方法，包括：/n接收待识别的遥感图像；/n根据所述待识别的遥感图像的拍摄信息，确定文本识别参考数据；/n对所述遥感图像进行特征提取，得到该遥感图像的图像特征；/n对所述文本识别参考数据进行特征提取，得到该文本识别参考数据的文本特征；/n对所述图像特征和所述文本特征进行融合处理，得到融合特征；/n将所述融合特征输入预先训练的图像识别模型中，以由该图像识别模型对所述遥感图像进行识别；其中，所述图像识别模型的识别方法包括：根据所述融合特征中的图像特征得到初级识别结果，从所述初级识别结果中筛选符合所述融合特征中的所述文本特征的识别结果。/n

【技术特征摘要】
1.遥感图像的识别方法，包括：
接收待识别的遥感图像；
根据所述待识别的遥感图像的拍摄信息，确定文本识别参考数据；
对所述遥感图像进行特征提取，得到该遥感图像的图像特征；
对所述文本识别参考数据进行特征提取，得到该文本识别参考数据的文本特征；
对所述图像特征和所述文本特征进行融合处理，得到融合特征；
将所述融合特征输入预先训练的图像识别模型中，以由该图像识别模型对所述遥感图像进行识别；其中，所述图像识别模型的识别方法包括：根据所述融合特征中的图像特征得到初级识别结果，从所述初级识别结果中筛选符合所述融合特征中的所述文本特征的识别结果。


2.根据权利要求1所述的方法，其中，
所述对所述遥感图像进行特征提取，包括：
对所述遥感图像进行至少两个尺度的特征提取，得到至少两个图像特征；
所述对所述图像特征和所述文本特征进行融合处理，包括：
根据预先确定的融合维度，将所述至少两个图像特征分别对应的初始矩阵与所述文本特征对应的初始矩阵进行对齐；以及
将对齐后的各矩阵进行融合计算。


3.根据权利要求2所述的方法，其中，所述融合维度满足：大于或等于所述至少两个图像特征分别对应的初始矩阵的维度和所述文本特征对应的初始矩阵的维度中的最大维度。


4.根据权利要求2所述的方法，其中，所述至少两个图像特征的特征分辨率依次降低；
所述将对齐后的各矩阵进行融合计算，包括：
在所述至少两个图像特征中确定特征分辨率最低的第一图像特征；
将所述文本特征对应的对齐后的矩阵与所述第一图像特征对应的对齐后的矩阵进行融合计算，获得初级融合矩阵；
将所述初级融合矩阵与除所述第一图像特征之外的图像特征对应的对齐后的矩阵进行融合计算。


5.根据权利要求4所述的方法，其中，所述将所述初级融合矩阵与除所述第一图像特征之外的图像特征对应的对齐后矩阵进行融合计算，包括：
将除所述第一图像特征之外的图像特征对应的对齐后的矩阵经可变形卷积层进行处理；
将所述初级融合矩阵与经可变形卷积层处理后的各矩阵进行融合计算。


6.根据权利要求1所述的方法，其中，
所述文本识别参考数据包括：所述待识别的遥感图像的拍摄信息和根据该拍摄信息从预先设置的先验知识库中获取的参考物体的标识信息。


7.根据权利要求1所述的方法，其中，所述遥感图像的拍摄信息包括以下中的至少一项：该遥感图像被拍摄的时间信息、该遥感图像所拍摄的地域名称、该遥感图像所拍摄的地点的经纬度信息。


8.根据权利要求1至7中任一所述的方法，其中，
所述对所述遥感图像进行特征提取，包括：利用图像编码器对所述遥感图像进行特征提取；所述图像编码器包括卷积神经网络；
和/或，
所述对所述文本识别参考数据进行特征提取，包括：利用文本编码器对所述文本识别参考数据进行特征提取；所述文本编码器包括循环神经网络和Transformer模型中的至少一个；
和/或，
所述图像识别模型通过卷积神经网络实现。


9.遥感图像的识别装置，包括：
数据确定模块，配置为接收待识别的遥感图像；根据所述待识别的遥感图像的拍摄信息，确定文本识别参考数据；...

【专利技术属性】
技术研发人员：劳江微，王剑，陈景东，褚崴，孙剑哲，顾欣欣，甘利民，马波，汪佳，孙晓冬，余泉，
申请(专利权)人：支付宝杭州信息技术有限公司，
类型：发明
国别省市：浙江;33