一种应用于智慧城市的多源异构数据压缩方法技术

本申请公开了应用于智慧城市的多源异构数据压缩方法，包括：数据传输单元DTS采集多个终端设备上传的数据，所述数据类型包括物联网IoT数据、地理信息系统GIS数据和建筑信息模型BIM数据，且上述数据均包含时间属性和地区属性，所述多个终端设备采用多源异构网络进行组网，所述DTS处于数据汇聚层；所述DTS将所述采集到的数据按照不同数据类型进行分组及数据清洗，生成矩阵式原始数据组；所述DTS按照预设采样模型进行所述原始数据组进行采样，获取所述原始数据组的多个样本数据，所述样本数据量低于所述矩阵式原始数据组的数据量；所述DTS将所述多个样本数据组按照预设格式进行数据拼装，形成压缩数据组，并将所述压缩数据组发送至核心层。

【技术实现步骤摘要】
一种应用于智慧城市的多源异构数据压缩方法
本申请涉及数据处理
，尤其涉及应用于智慧城市的多源异构数据压缩方法。
技术介绍
城市信息模型(CityInformationModeling，CIM)是对城市地上地下、室内室外各种实体目标及时空状态的数字化表达和描述，其反映城市规划、建设、发展以及运行，并且可用于城市规划决策、城市建设、城市管理等工作。CIM是一个跨度很大的概念，涉及的行业包括规划、国土、交通、水利、安防、人防、环境保护、文物保护、能源燃气等各大行业及一切智慧城市相关的领域。目前国内外对CIM尚缺乏系统深入的研究，据《智慧城市背景下城市信息模型相关技术发展综述》论文中的观点，可尝试从构成CIM术语的三个单词初步分析其基本特征：首先是City，CIM要覆盖城市尺度，这里的“城市”可以实例化为某个城市或城区、某个园区、某个社区、某个院落等，但它对建模对象的描述能力应该是城市级的；其次是Information，CIM所容纳的信息应该是覆盖各种空间、时间维度的，是能支撑各种城市应用的，CIM中的信息可以描述城市各种物理或人本文档来自技高网...

【技术保护点】
1.一种应用于智慧城市的多源异构数据压缩方法，其特征在于，包括：/n数据传输单元DTS采集多个终端设备上传的数据，所述数据类型包括物联网IoT数据、地理信息系统GIS数据和建筑信息模型BIM数据，且上述数据均包含时间属性和地区属性，所述多个终端设备采用多源异构网络进行组网，所述DTS处于数据汇聚层；/n所述DTS将所述采集到的数据按照不同数据类型进行分组及数据清洗，生成矩阵式原始数据组；/n所述DTS按照预设采样模型进行所述原始数据组进行采样，获取所述原始数据组的多个样本数据，所述样本数据量低于所述矩阵式原始数据组的数据量；/n所述DTS将所述多个样本数据组按照预设格式进行数据拼装，形成压缩数...

【技术特征摘要】
1.一种应用于智慧城市的多源异构数据压缩方法，其特征在于，包括：
数据传输单元DTS采集多个终端设备上传的数据，所述数据类型包括物联网IoT数据、地理信息系统GIS数据和建筑信息模型BIM数据，且上述数据均包含时间属性和地区属性，所述多个终端设备采用多源异构网络进行组网，所述DTS处于数据汇聚层；
所述DTS将所述采集到的数据按照不同数据类型进行分组及数据清洗，生成矩阵式原始数据组；
所述DTS按照预设采样模型进行所述原始数据组进行采样，获取所述原始数据组的多个样本数据，所述样本数据量低于所述矩阵式原始数据组的数据量；
所述DTS将所述多个样本数据组按照预设格式进行数据拼装，形成压缩数据组，并将所述压缩数据组发送至核心层。


2.根据权利要求1所述的方法，其特征在于，所述DTS按照预设采样模型进行所述原始数据组进行采样，获取所述原始数据组的多个样本数据，包括：
所述DTS按照时间顺序将所述原始数据组进行排序，并在同一地区且同一数据类型情况下，基于不同时序与数据大小的对应关系，获取不同时间段中数据的历史变化率，基于所述历史变化率设定随时间动态变化的数据第一采样率，所述第一采样率与所述数据变化率成正比，
以及，
所述DTS基于所述地区属性设置数据第二采样率，所述第二采样率大小与所述不同地区属性一一对应，
以及，
所述DTS基于所述不同的数据类型设置动态变化的第三采样率，所述第三采样率与所述数据类型一一对应，
所述DTS基于所述第一采样率、第二采样率和第三采样率，依次对所述原始数据组进行采样，并获取所述采样后的多个样本数据组。


3.根据权利要求1所述的方法，其特...

【专利技术属性】
技术研发人员：麦雪楹，
申请(专利权)人：佛山市海协科技有限公司，
类型：发明
国别省市：广东;44