【技术实现步骤摘要】
本专利技术属于涉及信息,尤其是涉及一种空间位置敏感的时空数据湖数据管理方法,主要用于提升数据湖在数据管理和分析处理方面的效率。
技术介绍
1、数字孪生对高性能数据分析和处理提出了更高的要求,针对各类智慧应用,需要实时处理分析海量数据。数字孪生的部署场景越来越复杂,涉及大量云-边分布的需求,因此增强数据本地化、下沉数据处理到边端,成为提示数据处理效率和用户响应能力的重要手段。数据湖作为支持数字孪生并管理包括时空信息在内的各种复杂数据的平台,对处理性能、吞吐率和响应能力有很高的要求,因此需要通过提升计算能力和降低数据传输延迟来提升作为数字孪生应用的支撑平台所需的数据-计算高性能平台能力。在面向数字孪生所需支持的计算场景中,最主要的包括:批处理、流处理和时空信息处理模式。因此在提升计算效率方面,需要提供批处理的数据本地化、流处理数据本地化和各类数据查询的处理的数据本地化。
2、本项目提出基于时空属性实现计算本地化,从而提升数据湖在数据管理和分析处理方面的效率。该技术分别对应处理数据湖的几个典型计算场景:流处理计算、批处理计算和高性
...【技术保护点】
1.一种空间位置敏感的时空数据湖数据管理方法,其特征在于:
2.根据权利要求1所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:包括建立基于时空索引的资源管理,所述资源管理包括以下内容:
3.根据权利要求2所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:所述时空索引以四维空间表示,所述空间立方体由{xi, yi, zi}到{xj, yj, zj}两个空间点所标定,所述时间范围从ti到tj所标定。
4.根据权利要求3所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:每个计算设备、存储设备和传感器具有对应
...【技术特征摘要】
1.一种空间位置敏感的时空数据湖数据管理方法,其特征在于:
2.根据权利要求1所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:包括建立基于时空索引的资源管理,所述资源管理包括以下内容:
3.根据权利要求2所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:所述时空索引以四维空间表示,所述空间立方体由{xi, yi, zi}到{xj, yj, zj}两个空间点所标定,所述时间范围从ti到tj所标定。
4.根据权利要求3所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:每个计算设备、存储设备和传感器具有对应的空间索引,且空间索引之间可以重叠,所述空间索引以数字孪生空间中对应的空间范围为基准,同时考虑物理设备部署拓扑。
5.根据权利要求2所述的一种空间位置敏感的时空数据湖数据管理方法,其特征在于:所述数据流图gd的节点坐标表示为{vd, ed},其中vd表示节点类型,ed表示连接类型。
6.根据权利要求1所述的一种空间位置敏感的时空数...
【专利技术属性】
技术研发人员:赵继胜,吴宇,
申请(专利权)人:上海孚典智能科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。