遥感数据的处理方法、装置、系统以及存储介质制造方法及图纸

技术编号:34766275 阅读:117 留言:0更新日期:2022-08-31 19:17
本申请公开了一种遥感数据的处理方法、装置、系统以及存储介质。其中,该方法包括:通过目标服务节点从数据源获取第一遥感数据,其中,数据源和目标服务节点位于第一区域;通过目标服务节点转发第一遥感数据至目标处理平台,其中,目标处理平台位于第二区域;通过目标处理平台对第一遥感数据进行预处理,得到预处理结果;通过目标处理平台对预处理结果进行存储,其中,预处理结果由位于目标处理平台下游的目标服务平台进行处理。本申请解决了关技术中由于服务节点只能对其对应的遥感数据进行处理,从而导致遥感数据的处理效率较的技术问题。题。题。

【技术实现步骤摘要】
遥感数据的处理方法、装置、系统以及存储介质


[0001]本申请涉及遥感数据的处理领域,具体而言,涉及一种遥感数据的处理方法、装置、系统以及存储介质。

技术介绍

[0002]目前,在跨区域访问数据源以便获取遥感数据时,需要通过与该遥感数据类型对应的服务节点对数据源进行访问,并对获取到的遥感数据进行处理,将处理后的遥感数据进行存储,在此过程中,不同类型的遥感数据需要部署专门的服务节点,当数据源增加新的类型的遥感数据时,则需要对新增加的遥感数据类型部署对应的服务节点,其成本较高。
[0003]针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

[0004]本申请实施例提供了一种遥感数据的处理方法、装置、系统以及存储介质,以至少解决相关技术中由于服务节点只能对其对应的遥感数据进行处理,从而导致遥感数据的处理效率较低的技术问题。
[0005]根据本申请实施例的一个方面,提供了一种遥感数据的处理方法,包括:通过目标服务节点从数据源获取第一遥感数据,其中,数据源和目标服务节点位于第一区域;通过目标服务节点转发第一遥感数据至目标处理平台,其中,目标处理平台位于第二区域;通过目标处理平台对第一遥感数据进行预处理,得到预处理结果;通过目标处理平台对预处理结果进行存储,其中,预处理结果由位于目标处理平台下游的目标服务平台进行处理。
[0006]根据本申请实施例的一个方面,还提供了一种遥感数据的处理装置,包括:获取模块,用于通过目标服务节点从数据源获取第一遥感数据,其中,数据源和目标服务节点位于第一区域;转发模块,用于通过目标服务节点转发第一遥感数据至目标处理平台,其中,目标处理平台位于第二区域;预处理模块,用于通过目标处理平台对第一遥感数据进行预处理,得到预处理结果;存储模块,用于通过目标处理平台对预处理结果进行存储,其中,预处理结果由位于目标处理平台下游的目标服务平台进行处理。
[0007]根据本申请实施例的一个方面,还提供了一种遥感数据的处理系统,包括:目标服务节点,用于从数据源获取第一遥感数据,并转发第一遥感数据,其中,数据源和目标服务节点位于第一区域;目标处理平台,用于对第一遥感数据进行预处理,得到预处理结果,并对预处理结果进行存储,其中,目标处理平台位于第二区域,预处理结果由位于目标处理平台下游的目标服务平台进行处理。
[0008]根据本申请实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行上述任意一个实施例的遥感数据的处理方法。
[0009]根据本申请实施例的另一方面,还提供了一种计算机终端,包括:存储器和处理器,处理器用于运行程序,其中,程序运行时执行上述任意一个实施例的遥感数据的处理方
法。
[0010]在本申请实施例中,首先通过目标服务节点从数据源获取第一遥感数据,其中,数据源和目标服务节点位于第一区域;通过目标服务节点转发第一遥感数据至目标处理平台,其中,目标处理平台位于第二区域;通过目标处理平台对第一遥感数据进行预处理,得到预处理结果;通过目标处理平台对预处理结果进行存储,其中,预处理结果由位于目标处理平台下游的目标服务平台进行处理,实现了提高遥感数据的处理效率,容易注意到的是,可以通过第一区域的目标服务节点获取并转发第一遥感数据至第二区域的目标处理平台,由于服务节点仅作转发数据的工作,因此,不需要针对不同的类型设置对应的服务节点,可以通过统一的目标处理平台对第一遥感数据进行预处理,从而提高数据的处理效率,并且存储后的遥感数据是经过预处理后的数据,便于目标处理平台可以直接使用,不需要再做额外的处理,进而解决了关技术中由于服务节点只能对其对应的遥感数据进行处理,从而导致遥感数据的处理效率较的技术问题。
附图说明
[0011]此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
[0012]图1a是根据现有技术的一种基于服务节点的分散独立部署采集示意图;
[0013]图1b是根据现有技术的一种独立节点的示意图;
[0014]图2是根据本申请实施例的一种用于实现遥感数据的处理方法的计算机终端(或移动设备)的硬件结构框图;
[0015]图3是根据本申请实施例的一种计算环境的结构框图;
[0016]图4是根据本申请实施例的一种服务网格的结构框图;
[0017]图5是根据本申请实施例的一种遥感数据的处理方法的流程图;
[0018]图6是根据本申请实施例的一种遥感数据的处理系统的结构框图;
[0019]图7是根据本申请实施例的一种遥感数据的处理装置的示意图;
[0020]图8根据本申请实施例的一种计算机终端的结构框图。
具体实施方式
[0021]为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
[0022]需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品
或设备固有的其它步骤或单元。
[0023]首先,在对本申请实施例进行描述的过程中出现的部分名词或术语适用于如下解释:
[0024]大数据计算服务(MaxCompute,简称为ODPS),为一种海量数据处理平台,主要服务于批量结构化数据的存储和计算,可以提供海量数据仓库的解决方案以及针对大数据的分析建模服务。
[0025]弹性容器实例(Elastic Container Instance,简称ECI),为一种敏捷安全的无服务器容器运行服务。无需管理底层服务器,只需要提供打包好的镜像,即可运行容器。
[0026]云服务器(Elastic Compute Service,简称ECS),为一种简单高效、处理能力可弹性伸缩的计算服务,可快速构建更稳定、安全的应用,提升运维效率,降低计算成本。
[0027]时空资产目录(Spatio Temporal Assets Catalogs,简称为STAC),旨在标准化地理空间资产元数据的结构化和查询方式,是表示某个地点和时间的地球信息的任何文件。
[0028]分布式:分布式系统是由一本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种遥感数据的处理方法,其特征在于,包括:通过目标服务节点从数据源获取第一遥感数据,其中,所述数据源和所述目标服务节点位于第一区域;通过所述目标服务节点转发所述第一遥感数据至目标处理平台,其中,所述目标处理平台位于第二区域;通过所述目标处理平台对所述第一遥感数据进行预处理,得到预处理结果;通过所述目标处理平台对所述预处理结果进行存储,其中,所述预处理结果由位于所述目标处理平台下游的目标服务平台进行处理。2.根据权利要求1所述的方法,其特征在于,所述目标服务节点包括至少一个转发节点,通过所述目标服务节点转发所述第一遥感数据至目标处理平台,包括:基于负载均衡策略确定所述至少一个转发节点中的目标转发节点;基于所述目标转发节点将所述第一遥感数据转发至所述目标处理平台。3.根据权利要求1所述的方法,其特征在于,所述方法还包括:通过所述目标处理平台确定与所述第一遥感数据对应的目标检索模板和目标筛选模板;利用所述目标检索模板和所述目标筛选模板对所述第一遥感数据进行处理,生成所述第一遥感数据对应的数据下载表,其中,所述数据下载表至少包括:所述第一遥感数据的第一元数据信息和下载信息;基于所述数据下载表对所述第一遥感数据进行下载,得到下载结果,其中,所述下载结果用于表征是否成功下载所述第一遥感数据;在所述下载结果表征成功下载所述第一遥感数据的情况下,对所述第一遥感数据进行预处理,得到所述预处理结果。4.根据权利要求3所述的方法,其特征在于,利用所述目标检索模板和所述目标筛选模板对所述第一遥感数据进行处理,生成所述第一遥感数据对应的数据下载表,包括:利用所述目标检索模板对所述第一遥感数据进行数据定位,生成定位结果;基于所述目标筛选模板和所述定位结果对所述第一遥感数据进行筛选,生成筛选结果;基于所述定位结果和所述筛选结果获取所述第一元数据信息和所述下载信息;基于所述第一元数据信息和所述下载信息生成所述数据下载表。5.根据权利要求3所述的方法,其特征在于,在基于所述数据下载表对所述第一遥感数据进行下载,得到下载结果之后,所述方法还包括:基于所述下载结果对数据状态表中与所述第一遥感数据对应的第一状态信息进行更新,其中,所述数据状态表用于存储不同遥感数据的状态信息,所述第一状态信息至少包括:下载时间、下载状态和遥感数据名称。6.根据权利要求1所述的方法,其特征在于,通过所述目标处理平台对所述第一遥感数据进行预处理,得到预处理结果,包括:对所述第一遥感数据进行拆分处理,得到多个第二遥感数据;基于至少一个预处理节点对所述多个第二遥感数据进行预处理,得到多个子处理结果;...

【专利技术属性】
技术研发人员:魏曦明岳永安
申请(专利权)人:阿里巴巴中国有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1