本申请公开了基于多模态数据的地面目标精准识别星上模糊推理方法，涉及遥感卫星在轨图像处理领域，以林火预测为切入点，通过任务区域裁剪、相对辐射矫正、图像配准后重采样、图像合成、植被AI识别裁剪等步骤获取植被有效数据，并对植被有效数据进行绝对辐射校正、系统几何矫正、快速大气矫正，实现可燃物载量的在轨实时处理，同时结合地面上注的关联要素完成数据库积累，基于多模态数据输入及关联要素在时间维度的模糊化规则设计完成模糊推理规则库构建；再按照规则库和所给的事实执行推理过程，实现基于多模态数据的在轨火情预测模糊推理设计，完成星上在轨森林火情预测。完成星上在轨森林火情预测。完成星上在轨森林火情预测。
【技术实现步骤摘要】
基于多模态数据的地面目标精准识别星上模糊推理方法
[0001]本专利技术涉及遥感卫星在轨图像处理领域，特别是基于卫星平台的在轨处理能力，一种基于多模态数据的地面目标精准识别星上模糊推理方法，以林火预测为例。
技术介绍
[0002]随着卫星遥感技术的不断发展，依赖地面的传统处理模式难以满足高时效数据服务的需求，以在轨智能处理系统为基础的智能化遥感卫星逐渐发展起来；随着边缘计算和人工智能软硬件技术的发展和应用，在轨处理实现了高算力处理和智能化分析能力，搭载高算力GPU计算核心的星上系统已经得到在轨应用；但现阶段在轨处理多是面向单一场景的瞬时识别，仍依赖地面进行信息加工完成知识的挖掘，降低了信息的流转速度。在高算力的支持下，当前在轨处理系统已经具备了星上全流程数据处理的能力，实现了从海量数据获取、处理到信息提取的过程。然而系统的建设在多模应用方面仍存在一定缺失，主要体现为：当前在轨智能处理应用多是针对特定目标进行检测和识别，仅获取目标的基本信息（如位置、尺寸、类别等）并下传，基本信息是目标的特征表达，缺乏关联分析和推理。
技术实现思路
[0003]本专利技术要解决的技术问题是针对以上不足，提供基于多模态数据的地面目标精准识别星上模糊推理方法，针对高光谱卫星在轨智能处理在林火预测中的应用，依托在轨智能处理获取的可燃物载量信息和地面上注的温度、湿度、降水量等多模态数据，利用多模态数据和模糊推理方法进行在轨知识推理的研究，提出了融合多模态数据的在轨森林火情预测模糊推理方法，完成星上在轨森林火情预测。
[0004]为解决以上技术问题，本专利技术采用以下技术方案：基于多模态数据的地面目标精准识别星上模糊推理方法，包括以下步骤：步骤1，数据获取；卫星接收并解析任务指令，根据指令要求执行拍摄任务，获取任务目标区原始数据；步骤2，任务区域裁剪，完成B28、B14、B2三个波段有效目标区裁剪；步骤3，基于语义分割对 B14波段进行云判，剔除无效数据，减少数据量；步骤4，相对辐射矫正；步骤5，进行图像配准后重采样；针对渐变式滤光片设计的高光谱载荷，通过SURF匹配提取波段间特征点，计算波段间仿射变换模型，完成同名像素的空间对准，并基于同名成像区进行数据裁剪。
[0005]步骤6：图像合成，基于裁剪后的数据进行三波段通道数据合并；步骤7：植被AI识别裁剪，基于深度学习网络模型提取植被有效数据，并记录图像像素坐标；步骤8：对植被数据进行绝对辐射校正；
步骤9，完成绝对辐射校正后，进行系统几何矫正；步骤10，完成绝对辐射校正和几何矫正后，进行图像数据快速大气矫正。
[0006]进一步的，还包括以下步骤：步骤11，利用步骤10中获取的表观反射率数据，计算增强植被指数EVI和归一化植被指数NDVI；步骤12：利用步骤11获得的EVI和NDVI数据，基于简单线性关系模型生成可燃物载量F数据，并构建可燃物载量查找表；步骤13：对任务目标点温度、湿度和降水量关联要素进行模糊化处理；步骤14：基于以上计算获得的多模态数据模糊尺度归一化结果，利用简单线性加约束，完成林火风险等级预测数据产品在轨自主输出，实现星上在轨智能预测模糊推理设计。
[0007]进一步的，所述步骤2具体过程如下：根据辅助数据编码格式，解析时间、轨道、姿态等有效数据，结合几何定标参数和严密成像几何模型进行成像中心点地理坐标快速解算；同时以成像任务上注中心目标点经纬度为中心，沿轨方向前后1.5倍幅宽完成B28（中心波长880）
‑
B14（中心波长670）
‑
B2（中心波长466）三个波段有效目标区裁剪。
[0008]进一步的，所述步骤4具体过程如下：根据辐射定标参数查找表，逐波段、逐探元进行相对辐射校正，任意波段第m行n列数据校正公式如下：（1）；其中，表示辐射校正后的数据，表示原始图像，表示第n列探元的增益系数，表示第n列探员的偏移系数。
[0009]进一步的，所述步骤8具体过程如下：利用绝对辐射定标参数完成植被有效数据的绝对辐射校正，得到辐亮度数据，任意波段经绝对辐射校正公式如下：（2）；其中，表示绝对辐射定标后的辐亮度数据，表示绝对辐射定标前的DN值数据，表示第i波段绝对辐射定标增益系数，表示第i波段绝对辐射定标偏移系数。
[0010]进一步的，所述步骤9具体过程如下：依据步骤7中图像像素坐标定位植被图像成像行计数和成像UTC时间，获取有效辅助数据对应的轨道和姿态数据，利用上注的几何定标参数和严密成像几何模型进行地理坐标快速解算，公式如下所示：
（3）；上式中，为像点对应地物点在WGS84坐标下的空间直角坐标；为成像时刻卫星在WGS84坐标系下的位置矢量；为J2000坐标系与WGS84坐标系的转换矩阵；为卫星本体坐标系的矩阵，由星上姿态测量获取；分别为cam相机坐标系的矩阵，由地面测量获取；（x，y）为影像坐标，（x0，y0）为主点坐标，f为主距，（
△
x，
△
y）为由相机内方位元素误差引起的像点偏移。
[0011]进一步的，所述步骤10具体过程如下：基于步骤6输出的图像数据，采用自适应平场域法实现在轨快速大气校正，以获取表观反射率数据，计算模型如下所示：（4）；其中，表示波段的表观发射率数据，表示波段的像元辐射值，表示波段对应均匀场的像元辐射均值。
[0012]进一步的，所述步骤11具体过程如下：EVI和NDVI的计算公式如下所示：（5）；（6）；其中B28、B2和B14为步骤2中有效目标区裁剪的三个波段。
[0013]进一步的，所述步骤13具体过程如下：a)序列温度观测模糊定义（7）；式中表示时间轴温度模糊化值，表示单次观测温度值，n表示观测次数；温度瞬时变化对地表环境状态影响较小，采用平均值法进行模糊化设计b)序列湿度观测模糊定义
（8）；湿度数据影响具有临近效应，采用时间序列逆序排序策略，分时段均值加权归一化处理，增强影响因子的合理性。式中表示时间轴湿度模糊化值，表示单次观测湿度值，n表示观测次数；c)序列降水量观测模糊定义（9）；降水量模糊化处理参照湿度观测值，式中表示序列观测降水量模糊化值，表示单次观测湿度值，n表示观测次数。
[0014]进一步的，所述步骤14具体过程如下：线性加约束计算公式如下：（10）；其中Y表示风险等级，Fm
k,l
表示第k行l列像素对应的可燃物载量模糊尺度，Tm表示温度模糊尺度，Hm表示湿度模糊尺度，Pm表示降水量模糊尺度。
[0015]本专利技术采用以上技术方案，与现有技术相比，具有如下技术效果：针对高光谱卫星在轨智能处理在林火预测中的应用，依托在轨智能处理获取的可燃物载量信息和地面上注的温度、湿度、降水量等多模态数据，利用多模态数据和模糊推理方法进行在轨知识推理的研究，提出了融合多模态数据的在轨森林火情预测模糊推理方法，完成星上在轨森林火情预测。
附图说明
[0016]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.基于多模态数据的地面目标精准识别星上模糊推理方法，其特征在于：包括以下步骤：步骤1，数据获取；卫星接收并解析任务指令，根据指令要求执行拍摄任务，获取任务目标区原始数据；步骤2，任务区域裁剪，完成B28、B14、B2三个波段有效目标区裁剪；步骤3，基于语义分割对 B14波段进行云判，剔除无效数据，减少数据量；步骤4，相对辐射矫正；步骤5，进行图像配准后重采样；针对渐变式滤光片设计的高光谱载荷，通过SURF匹配提取波段间特征点，计算波段间仿射变换模型，完成同名像素的空间对准，并基于同名成像区进行数据裁剪；步骤6：图像合成，基于裁剪后的数据进行三波段通道数据合并；步骤7：植被AI识别裁剪，基于深度学习网络模型提取植被有效数据，并记录图像像素坐标；步骤8：对植被数据进行绝对辐射校正；步骤9，完成绝对辐射校正后，进行系统几何矫正；步骤10，完成绝对辐射校正和几何矫正后，进行图像数据快速大气矫正。2.如权利要求1所述的基于多模态数据的地面目标精准识别星上模糊推理方法，其特征在于：还包括以下步骤：步骤11，利用步骤10中获取的表观反射率数据，计算增强植被指数EVI和归一化植被指数NDVI；步骤12：利用步骤11获得的EVI和NDVI数据，基于简单线性关系模型生成可燃物载量F数据，并构建可燃物载量查找表；步骤13：对任务目标点温度、湿度和降水量关联要素进行模糊化处理；步骤14：基于以上计算获得的多模态数据模糊尺度归一化结果，利用简单线性加约束，完成林火风险等级预测数据产品在轨自主输出，实现星上在轨智能预测模糊推理设计。3.如权利要求1所述的基于多模态数据的地面目标精准识别星上模糊推理方法，其特征在于：所述步骤2具体过程如下：根据辅助数据编码格式，解析时间、轨道、姿态有效数据，结合几何定标参数和严密成像几何模型进行成像中心点地理坐标快速解算；同时以成像任务上注中心目标点经纬度为中心，沿轨方向前后1.5倍幅宽完成三个波段有效目标区裁剪。4.如权利要求1所述的基于多模态数据的地面目标精准识别星上模糊推理方法，其特征在于：所述步骤4具体过程如下：根据辐射定标参数查找表，逐波段、逐探元进行相对辐射校正，任意波段第m行n列数据校正公式如下：（1）；其中，表示辐射校正后的数据，表示原始图像，表示第n列探元的增益系数，表示第n列探员的偏移系数。
5.如权利要求1所述的基于多模态数据的地面目标精准识别星上模糊推理方法，其特征在于：所述步骤8具体过程如下：利用绝对辐射定标参数完成植被有效数据的绝对辐射校正，得到辐亮度数据，任意波段经绝对辐射校正公式如下：（2）；其中，表示绝对辐射定标后的辐亮度数据，表示绝对辐射定标前的DN值数据...
【专利技术属性】
技术研发人员：张强，颜军，张雷，吴佳奇，蒋晓华，颜志宇，潘申林，向红印，
申请(专利权)人：珠海欧比特卫星大数据有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。