【技术实现步骤摘要】
本申请涉及遥感技术与人工智能，尤其涉及一种基于知识图谱的遥感图像处理方法、系统、设备及介质。
技术介绍
1、在遥感技术和人工智能领域中，大规模语言模型结合检索增强生成技术已成为一种提升模型理解和生成能力的有效手段。这一范式通常涉及从输入的文本问题中提取关键词，然后利用这些关键词在庞大的知识库或知识图谱中进行高效检索，以获取与问题相关的背景知识和信息。通过这种方式，模型能够结合检索到的知识来生成更加准确和丰富的回答或解释。
2、然而，在遥感任务这一特定应用场景下，传统的大规模语言模型结合检索增强生成技术面临着显著的挑战。遥感任务的问题往往侧重于视觉内容的描述和分析，而非单纯的语言表述。这类问题通常包含较少的可提取关键词，且这些关键词往往不够精确，难以准确反映问题的核心视觉特征和需求。此外，遥感图像中的信息复杂多样，包含大量的地理、地貌、气象等专业知识，这些信息的提取和解读对关键词的准确性和全面性提出了极高的要求。
3、由于上述原因，直接从遥感任务的问题中提取的关键词往往无法有效地在知识库或知识图谱中检索到相关且准确...
【技术保护点】
1.一种基于知识图谱的遥感图像处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，基于所述查询文本和所述知识文本，通过文本编码器进行文本编码，获得文本标记包括：
3.根据权利要求1所述的方法，其特征在于，所述视觉语言模型包括自注意力模块、灵活注意力模块和投影层；
4.根据权利要求3所述的方法，其特征在于，所述知识文本包括ROI数据，所述灵活注意力模块包括分层自注意力模块和高分辨率标记选择模块；
5.根据权利要求4所述的方法，其特征在于，所述分层自注意力模块包括多个分层自注意力层；
...
【技术特征摘要】
1.一种基于知识图谱的遥感图像处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，基于所述查询文本和所述知识文本，通过文本编码器进行文本编码，获得文本标记包括：
3.根据权利要求1所述的方法，其特征在于，所述视觉语言模型包括自注意力模块、灵活注意力模块和投影层；
4.根据权利要求3所述的方法，其特征在于，所述知识文本包括roi数据，所述灵活注意力模块包括分层自注意力模块和高分辨率标记选择模块；
5.根据权利要求4所述的方法，其特征在于，所述分层自注意力模块包括多个分层自注意力层；
6.根据权利要求1所述的方法，其特征在于，基于所述第一预测答案和...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。