一种空地协同快速三维建模系统、电子设备及存储介质技术方案

本发明专利技术提供一种空地协同快速三维建模系统、电子设备及存储介质，其中，系统包括：信息获取模块，获取相机的位置姿态信息和参数信息；信息接收模块在地面端接收信息转发模块发送过来的位置姿态信息和参数信息；视频获取模块，获取相机的视频；所述视频转发模块转发视频到视频接收模块；图片生成模块解析视频的帧数据，截取视频帧保存成图片；并将位置姿态信息和参数信息写入所述图片的exif信息和xmp信息，得到信息写入后的图片；所述模型生成模块接收所述信息写入后的图片，将所述信息写入后的图片输入到建模引擎内，生成三维模型。本发明专利技术提出的方案，缩短信息获取时间，提高现场指挥效能。为进行救援提供地形、地貌等数据支撑。地貌等数据支撑。地貌等数据支撑。

【技术实现步骤摘要】
一种空地协同快速三维建模系统、电子设备及存储介质


[0001]本专利技术属于航空摄影领域，尤其涉及一种空地协同快速三维建模系统、电子设备及存储介质。

技术介绍

[0002]倾斜摄影：通过在同一飞行平台上搭载多台传感器，同时从一个垂直、四个倾斜、五个不同的视角同步采集影像，获取地面物体更为完整准确的信息，将用户引入了符合人眼视觉的真实直观世界。
[0003]空三加密：空三加密即解析空中三角测量，亦称电算加密或摄影测量加密，是以像片上量测的像点坐标为依据，采用严密的数学模型，按最小二乘法原理，用少量野外控制点(像控点)作为约束条件，在计算机上解求出所摄地区未知点的地面坐标。
[0004]TIN模型：不规则三角网(Triangulated Irregular Network，TIN)是另外一种表示数字高程模型的方法，根据区域的有限个点集将区域划分为相等的三角面网络，数字高程有连续的三角面组成，三角面的形状和大小取决于不规则分布的测点的位置和密度，能够避免地形平坦时的数据冗余，又能按地形特征点表示数字高程特征。它既减少规则格网方法带来的数据冗余，同时在计算(如坡度)效率方面又优于纯粹基于等高线的方法。
[0005]点云：目标表面特性的海量点集合，集合中的每个点代表一组X、Y、Z几何坐标和一个强度值，这个强度值根据物体表面反射率记录返回信号的强度。当这些点组合在一起时，就会形成一个点云，即空间中代表3D形状或对象的数据点集合。一般有激光测量和摄影测量两种方式获得。
[0006]DSM：数字地表模型(Digital Surface Model，DSM)是指包含了地表建筑物、桥梁和树木等高度的地面高程模型。
[0007]DEM：数字高程模型(Digital Elevation Model)是通过有限的地形高程数据实现对地面地形的数字化模拟(即地形表面形态的数字化表达)，它是用一组有序数值阵列形式表示地面高程的一种实体地面模型。
[0008]DOM：数字正射影像图(DOM,DigitalOrthophotoMap)是对航空(或航天)像片进行数字微分纠正和镶嵌，按一定图幅范围裁剪生成的数字正射影像集。它是同时具有地图几何精度和影像特征的图像。
[0009]赵伟山等通过无人机倾斜摄影和地面影像从不同维度获取地面物体的位置、形态、颜色等数据，通过多维度数据共同空三加密处理，增加目标物体的特征，进一步自动化三维实景Mesh建模，应用DP
‑
Modeler对单体进行精细化建模、纹理贴图及地面影像替换，最后生成的单体模型更加逼真的展示了建筑物的细部特征，一定程度解决了城市区域因道路狭窄、建筑物密集而导致地物遮挡突出，无法满足三维模型底商纹理的分辨率问题。
[0010]为了克服现有技术的不足，该专利技术提出一种基于空地协同的三维建模方法、智能终端以及存储装置，在获取倾斜影像数据的同时获取空中激光三维点云数据、地面三维激光点云数据，根据该数据获取空地激光融合点云、密集匹配点云，利用空地激光融合点云生
成三维模型，并通过倾斜影像渲染该三维模型形成建模目标的三维模型，相比于倾斜影像，空地激光融合点云的遮挡区域少，减少了数据获取盲区，三维模型的细节更加清晰、全面且精度高，提高了模型质量。
[0011]上述现有技术方案需要空中和地面同时对目标物体进行特征数据提取，其中地面作业耗费时间和成本远远大于空作业，且在应急场景下，通过地面进行特征提取基本无法实现，而且时间也不允许。因此，需仅利用空中数据提取达到对物体细部特征完美的展示，本专利技术仅用无人机多次作业或者集群作业即可实现同样的效果。

技术实现思路

[0012]为解决上述技术问题，本专利技术提出一种空地协同快速三维建模、电子设备及存储介质的技术方案，以解决上述技术问题。
[0013]本专利技术第一方面公开了一种空地协同快速三维建模系统，所述系统包括：信息获取模块、信息转发模块、信息接收模块、视频获取模块、视频转发模块、视频接收模块、图片生成模块和模型生成模块；
[0014]所述信息获取模块，通过串口通信或者TCP或者UDP网络通信的方式，获取相机的位置姿态信息和参数信息；
[0015]所述信息转发模块在机载端对所述位置姿态信息和参数信息进行整合打包，得到打包信息，通过TCP或者UDP的方式，以固定的协议格式转发到所述信息接收模块；
[0016]所述信息接收模块在地面端接收信息转发模块发送过来的所述打包信息，并将所述打包信息传递到图片生成模块；
[0017]所述视频获取模块在机载端，通过网络接口或者HDMI口，获取相机的视频；
[0018]所述视频转发模块在机载端接收视频获取模块的视频，并转发到地面端的视频服务；
[0019]所述视频接收模块在地面端接收所述视频服务的视频；
[0020]所述图片生成模块解析所述视频接收模块的视频的帧数据，截取视频帧保存成jpg图片；并将位置姿态信息和参数信息写入所述jpg图片的exif信息和xmp信息，得到信息写入后的图片；再将所述信息写入后的图片传入模型生成模块；
[0021]所述模型生成模块接收所述信息写入后的图片，将所述信息写入后的图片输入到建模引擎内，生成三维模型。
[0022]根据本专利技术第一方面的系统，所述位置姿态信息包括：经度、纬度、海拔高度、航向角、俯仰角和旋转角。
[0023]根据本专利技术第一方面的系统，所述参数信息包括：相机焦距和相机35mm焦距。
[0024]根据本专利技术第一方面的系统，如果航向角是相对于飞机的角度，所述相机的航向角h＝(h1+h2)％360；
[0025]其中，h1为飞机的航向角，h2为相机与飞机的夹角，％为求余符号。
[0026]根据本专利技术第一方面的系统，当相机是变焦相机的时候，相机焦距为原焦距除以变焦倍数，相机35mm焦距为原35mm焦距除以变焦倍数。
[0027]根据本专利技术第一方面的系统，所述将位置姿态信息和参数信息写入所述jpg图片的exif信息和xmp信息的方法包括：
[0028]将经度、纬度、海拔高度、相机焦距和相机35mm焦距写入jpg图片的exif信息；
[0029]将航向角、俯仰角和旋转角写入jpg图片的xmp信息。
[0030]根据本专利技术第一方面的系统，对于全黑或者部分黑的jpg图片的剔除方法包括：
[0031]如果jpg图片的尺寸小于预设尺寸，则剔除所述jpg图片。
[0032]根据本专利技术第一方面的系统，对于全黑或者部分黑的jpg图片的剔除方法还包括：
[0033]在jpg图片的宽和高分别每隔N个像素取一个点，在所有取的点中有两个或两个以上为纯黑，则剔除所述jpg图片。
[0034]本专利技术第二方面提供了一种电子设备，所述设备包括存储器和处理器，所述存储器上存储有计算机程序，该计算机程序被所述处理器执行时，执行如本专利技术第一方面所述的一种空地协同快速三维建模系统中的方法。
[003本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种空地协同快速三维建模系统，其特征在于，所述系统包括：信息获取模块、信息转发模块、信息接收模块、视频获取模块、视频转发模块、视频接收模块、图片生成模块和模型生成模块；所述信息获取模块，通过串口通信或者TCP或者UDP网络通信的方式，获取相机的位置姿态信息和参数信息；所述信息转发模块在机载端对所述位置姿态信息和参数信息进行整合打包，得到打包信息，通过TCP或者UDP的方式，以固定的协议格式转发到所述信息接收模块；所述信息接收模块在地面端接收信息转发模块发送过来的所述打包信息，并将所述打包信息传递到图片生成模块；所述视频获取模块在机载端，通过网络接口或者HDMI口，获取相机的视频；所述视频转发模块在机载端接收视频获取模块的视频，并转发到地面端的视频服务；所述视频接收模块在地面端接收所述视频服务的视频；所述图片生成模块解析所述视频接收模块的视频的帧数据，截取视频帧保存成jpg图片；并将位置姿态信息和参数信息写入所述jpg图片的exif信息和xmp信息，得到信息写入后的图片；再将所述信息写入后的图片传入模型生成模块；所述模型生成模块接收所述信息写入后的图片，将所述信息写入后的图片输入到建模引擎内，生成三维模型。2.根据权利要求1所述的一种空地协同快速三维建模系统，其特征在于，所述位置姿态信息包括：经度、纬度、海拔高度、航向角、俯仰角和旋转角。3.根据权利要求2所述的一种空地协同快速三维建模系统，其特征在于，所述参数信息包括：相机焦距和相机35mm焦距。4.根据权利要求2所述的一种空地协同快速三维建模系统，其特征在于，如果航向...

【专利技术属性】
技术研发人员：黄晓辉，杨继星，房玉东，柳树林，贾泽宇，张志，狄瑞晟，边路，黄倩倩，
申请(专利权)人：应急管理部大数据中心，
类型：发明
国别省市：