一种底层数据模型的适配方法及存储介质组成比例

技术编号:39836622 阅读:22 留言:0更新日期:2023-12-29 16:20
本发明专利技术涉及大数据处理技术领域,且公开了一种底层数据模型的适配方法,包括:接口格式统一

【技术实现步骤摘要】
一种底层数据模型的适配方法及存储介质


[0001]本专利技术涉及大数据处理
,具体为一种底层数据模型的适配方法及存储介质


技术介绍

[0002]大数据或称巨量资料,指的是所涉及的资料量规模巨大到无法透过主流软件工具,在合理时间内达到撷取
、、
处理

并整理成为帮助企业经营决策更积极目的的资讯,在及肯尼斯
·
库克耶编写的
《》
中,大数据指不用随机分析法()这样捷径,而采用所有数据进行分析处理,大数据具有大量

高速

多样

低价值密度

真实性等特点

[0003]随着大数据技术的发展,数据中心的规模日益增大,对数据的管理和处理需求也随之增加,然而,由于各厂家存储设备的底层数据模型各不相同,导致数据在不同设备之间的交换和使用变得困难,此外,数据的梳理

处理和告警等操作也变得复杂和低效,一些企业数据系统庞大,有很多数据是需要一直保存的,通常在不同数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种底层数据模型的适配方法,包括:接口格式统一

数据模型与接口平台进行交互

数据梳理和管理

告警信息提供,其特征在于:所述接口格式统一:接口模块接收各种厂家设备传来的底层数据,通过网络数据交换设备适配器接口进行数据格式统一;所述数据模型与接口平台进行交互:通过对适配器进行编写的方式,将各种厂家的底层数据模型转换为统一的数据模型,从而实现与统一的底层数据模型接口平台的交互;所述数据梳理和管理:通过数据
ETL
技术对数据抽取

数据转换和数据加载等步骤,将原始数据转换为结构化的

易于处理和分析的数据;所述告警信息提供:在对数据进行梳理与管理的同时,设置一些告警规则,如数据异常

数据丢失

数据延迟等,当数据满足一些告警规则时,即可生成相应的告警信息,以便及时对数据进行处理
。2.
一种底层数据模型的储存介质,采用如权利要求1所述的一种底层数据模型的适配方法,其特征在于:所述存储介质采用一种硬件存储设备,如
SSD、HDD
等,作为数据的物理存储介质;同时,采用一种软件存储方案,如分布式文件系统

数据库等,作为数据的逻辑存储介质
。3.
根据权利要求2所述的一种底层数据模型的储存介质,其特征在于:所述存储介质包括:数据存储和检索

数据安全和隐私防护

扩展性和可伸缩性

兼容性和互操作性
。4.
根据权利要...

【专利技术属性】
技术研发人员:孙勇王景田樊鹏华袁宁廷柳晓萍张鸽段宇平李春生宋飒
申请(专利权)人:国网西藏电力有限公司信息通信公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1