一种自然资源多源数据融合方法技术

本发明专利技术涉及数据处理技术领域，本发明专利技术公开了一种自然资源多源数据融合方法，包括以下步骤；步骤一：DEM和遥感影像数据采集；步骤二：数据存储；步骤三：将DEM和遥感影像数据的叠加融合；步骤四：通过三维扩展模块提供的空间拉伸功能实现批量三维建模；步骤五：精细模型与三维地形的无缝融合，得到图形数据；步骤六：对检测到的冲突进行分类汇总；步骤七：采用相应的规则约束融合技术进行融合；本发明专利技术对各类数据融合产生的冲突进行归纳，依据领域知识进行冲突的协调，建立冲突协调领域服务，制定多业务数据融合策略，构建多业务数据融合模型，实现多业务数据的融合。多业务数据的融合。

【技术实现步骤摘要】
一种自然资源多源数据融合方法


[0001]本专利技术涉及数据处理
，具体为一种自然资源多源数据融合方法。

技术介绍

[0002]自然资源由机构调整后的自然资源部门统一管理，包括山、水、林、田、湖、草、沙。自然资源数据来自机构调整前的多个管理部门，各管理部门的部门标准和侧重点存在局部差异，形成了自然资源多源矢量数据。在实际情况中，根据需要，可以在自然资源多源矢量数据中选取基础数据和专题数据，将基础数据和专题数据融合以得到满足要求的融合数据；自然资源的调查工作与已开展的第三次全国国土调查工作相比，其调查内容涵盖范围更广，涉及到水流、森林、草地、荒地、滩涂、海洋等各类自然资源及其随着季节、年份不断变化的过程。这就需要充分借鉴为国土调查和各类专项自然资源调查数据建库与管理系统开发的经验，充分表达各类自然资源的时空特征；在自然资源统一调查监测的形势下，迫切需要以国土三调数据为基础，对各类资源数据开展数据整合工作，但是现有技术不能完全解决目前自然资源多源矢量数据融合中所存在的由于业务的并发性和异步性必然导致多业务数据在空间、属性和时间上的冲突的问题，鉴于此提出一种自然资源多源数据融合方法。

技术实现思路

[0003]本专利技术的目的在于提供一种自然资源多源数据融合方法，以解决上述
技术介绍
中提出的问题。
[0004]为实现上述目的，本专利技术提供如下技术方案：一种自然资源多源数据融合方法，包括以下步骤；步骤一、DEM和遥感影像数据采集：数据源包括基础地理信息数据、土地资源信息数据、水利资源信息数据、海洋资源信息数据、林业资源信息数据和气象资源信息数据；步骤二、数据存储：包括离线数据存储和实时数据存储；步骤三、将DEM和遥感影像数据的叠加融合，构建基础地形模型，作为基础数据底层数据平台；步骤四、在GIS平台中中提取基础地理要素的矢量数据，通过三维扩展模块提供的空间拉伸功能实现批量三维建模；步骤五、精细模型与三维地形的无缝融合，得到与三维地形相贴合的三维图形数据；步骤六、通过冲突检测工具对涉及图形的图斑、图面更新过程进行冲突检测,对检测到的冲突进行分类汇总；步骤七、根据冲突的关联性，判断冲突图斑图面之间是否有继承关系、拓扑关系以及属性关系，然后采用相应的约束规则进行技术融合；
步骤八、对融合后的成果数据进行图形质检，在质检合格的情况下保存/导出成果数据至自然资源多源数据管理库。
[0005]优选的，步骤一中：所述数据采集过程包括离线采集和实时采集；所述离线采集通过SQL方式来采集数据库的数据，利用Sqoop将关系数据库管理系统中的数据导入到Hadoop分布式文件系统HDFS中，在Hadoop MapReduce框架下完成数据转换任务，进而为数据融合提供基础数据源；所述实时数据采集采用的是脚本采集和分布式实时志采集系统；其中，所述脚本采集从数据库或网站上获取数据，并将其存储为统一的本地文件数据，所述分布式实时志采集系统用于抓取不同服务器上的海量日志信息。
[0006]优选的，步骤二中：所述离线数据存储使用HDFS或HBase存储离线采集的数据；所述实时数据存储采用分布式NoSQL数据库，利用Redis作为缓存数据库，供用户存储流式数据。
[0007]优选的，所述精细模型与三维地形的无缝融合包括以下步骤：S1、从卫星影像获取模型底图并赋予投影信息，并提取重点类型的矢量边界数据；S2、根据检测到的数据绘制精确的图形；S3、将数据导入SketchUp环境下通过图形设计、模型构建、纹理贴图、光照渲染等步骤建立精细场景模型，最后经插件转换将模型返回GIS平台中 环境，实现无缝融合。
[0008]优选的，通过冲突检测方法，得到不同的冲突类型；Y1、根据图形的图斑对象之间的继承关系、拓扑关系、属性关系，建立了图斑变更冲突归纳库；Y2、以此为基础，对冲突进行归纳。
[0009]优选的，所述继承关系为主前提条件，拓扑关系、属性关系为辅助前提条件，将不同冲突类型归纳为空间约束冲突、属性约束冲突、时间约束冲突三种类型。
[0010]优选的，所述自然资源多源数据管理库能够实现数据的导入导出、二三维浏览、数据转换、数据处理、自动赋值、数据质检、查询统计、成果输出。
[0011]本专利技术提出的一种自然资源多源数据融合方法，有益效果在于：1、本专利技术对各类数据融合产生的冲突进行归纳，依据领域知识进行冲突的协调，建立冲突协调领域服务，制定多业务数据融合策略，构建多业务数据融合模型，实现多业务数据的融合，达到自然资源数据更新的目的；2、本专利技术能构建自然资源三维动态信息系统，保证了自然资源调查数据成果的三维特征完整性和时空信息完整性，同时也为进一步开展自然资源统一确权登记工作提供了完整可靠的依据。
实施方式
[0012]下面将结合本专利技术的实施例，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施
例，都属于本专利技术保护的范围。
[0013]实施例，本专利技术提供一种技术方案：一种自然资源多源数据融合方法，包括以下步骤；步骤一、DEM和遥感影像数据采集：数据源包括基础地理信息数据、土地资源信息数据、水利资源信息数据、海洋资源信息数据、林业资源信息数据和气象资源信息数据；所述数据采集过程包括离线采集和实时采集；所述离线采集通过SQL方式来采集数据库的数据，利用Sqoop将关系数据库管理系统中的数据导入到Hadoop分布式文件系统HDFS中，在Hadoop MapReduce框架下完成数据转换任务，进而为数据融合提供基础数据源；所述实时数据采集采用的是脚本采集和分布式实时志采集系统；其中，所述脚本采集从数据库或网站上获取数据，并将其存储为统一的本地文件数据，所述分布式实时志采集系统用于抓取不同服务器上的海量日志信息；步骤二、数据存储：包括离线数据存储和实时数据存储；所述离线数据存储使用HDFS或HBase存储离线采集的数据；所述实时数据存储采用分布式NoSQL数据库，利用Redis作为缓存数据库，供用户存储流式数据；步骤三、将DEM和遥感影像数据的叠加融合，构建基础地形模型，作为基础数据平台；步骤四、在GIS平台中中提取基础地理要素的矢量数据，通过三维扩展模块提供的空间拉伸功能实现批量三维建模；步骤五、精细模型与三维地形的无缝融合，得到图形数据；所述精细模型与三维地形的无缝融合包括以下步骤：S1、从卫星影像获取模型底图并赋予投影信息，并提取重点类型的矢量边界数据；S2、根据检测到的数据绘制精确的图形；S3、将数据导入SketchUp环境下通过图形设计、模型构建、纹理贴图、光照渲染等步骤建立精细场景模型，最后经插件转换将模型返回GIS平台中 环境，实现无缝融合；步骤六、通过冲突检测工具对图形的图斑图面更新过程进行冲突检测,对检测到的冲突进行分类汇总；通过冲突检测方法，得到不同的冲突类型；Y1、根据图形的图斑对象之间的继承关系、拓扑关系、属性关系，建立了图斑变更冲本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种自然资源多源数据融合方法，其特征在于，包括以下步骤；步骤一、DEM和遥感影像数据采集：数据源包括基础地理信息数据、土地资源信息数据、水利资源信息数据、海洋资源信息数据、林业资源信息数据和气象资源信息数据；步骤二、数据存储：包括离线数据存储和实时数据存储；步骤三、将DEM和遥感影像数据的叠加融合，构建基础地形模型，作为基础数据底层数据平台；步骤四、在GIS平台中中提取基础地理要素的矢量数据，通过三维扩展模块提供的空间拉伸功能实现批量三维建模；步骤五、精细模型与三维地形的无缝融合，得到与三维地形相贴合的三维图形数据；步骤六、通过冲突检测工具对涉及图形的图斑、图面更新过程进行冲突检测,对检测到的冲突进行分类汇总；步骤七、根据冲突的关联性，判断冲突图斑图面之间是否有继承关系、拓扑关系以及属性关系，然后采用相应的约束规则进行技术融合；步骤八、对融合后的成果数据进行图形质检，在质检合格的情况下保存/导出成果数据至自然资源多源数据管理库。2.根据权利要求1所述的一种自然资源多源数据融合方法，其特征在于，步骤一中：所述数据采集过程包括离线采集和实时采集；所述离线采集通过SQL方式来采集数据库的数据，利用Sqoop将关系数据库管理系统中的数据导入到Hadoop分布式文件系统HDFS中，在Hadoop MapReduce框架下完成数据转换任务，进而为数据融合提供基础数据源；所述实时数据采集采用的是脚本采集和分布式实时志采集系统；其中，所述脚本采集从数据库或网站上获取数据，并将其存储为统一的本地文件数据，所述分布式实时...

【专利技术属性】
技术研发人员：胡辉，廖明，顾华奇，张勇，贺心刚，谢梅生，杨树平，申劲松，
申请(专利权)人：江西省自然资源事业发展中心，
类型：发明
国别省市：