【技术实现步骤摘要】
一种底层数据模型的适配方法及存储介质
[0001]本专利技术涉及大数据处理
,具体为一种底层数据模型的适配方法及存储介质
。
技术介绍
[0002]大数据或称巨量资料,指的是所涉及的资料量规模巨大到无法透过主流软件工具,在合理时间内达到撷取
、、
处理
、
并整理成为帮助企业经营决策更积极目的的资讯,在及肯尼斯
·
库克耶编写的
《》
中,大数据指不用随机分析法()这样捷径,而采用所有数据进行分析处理,大数据具有大量
、
高速
、
多样
、
低价值密度
、
真实性等特点
。
[0003]随着大数据技术的发展,数据中心的规模日益增大,对数据的管理和处理需求也随之增加,然而,由于各厂家存储设备的底层数据模型各不相同,导致数据在不同设备之间的交换和使用变得困难,此外,数据的梳理
、
处理和告警等操作也变得复杂和低效,一些企业数据系统庞大,有很多数据是需要一直保 ...
【技术保护点】
【技术特征摘要】
1.
一种底层数据模型的适配方法,包括:接口格式统一
、
数据模型与接口平台进行交互
、
数据梳理和管理
、
告警信息提供,其特征在于:所述接口格式统一:接口模块接收各种厂家设备传来的底层数据,通过网络数据交换设备适配器接口进行数据格式统一;所述数据模型与接口平台进行交互:通过对适配器进行编写的方式,将各种厂家的底层数据模型转换为统一的数据模型,从而实现与统一的底层数据模型接口平台的交互;所述数据梳理和管理:通过数据
ETL
技术对数据抽取
、
数据转换和数据加载等步骤,将原始数据转换为结构化的
、
易于处理和分析的数据;所述告警信息提供:在对数据进行梳理与管理的同时,设置一些告警规则,如数据异常
、
数据丢失
、
数据延迟等,当数据满足一些告警规则时,即可生成相应的告警信息,以便及时对数据进行处理
。2.
一种底层数据模型的储存介质,采用如权利要求1所述的一种底层数据模型的适配方法,其特征在于:所述存储介质采用一种硬件存储设备,如
SSD、HDD
等,作为数据的物理存储介质;同时,采用一种软件存储方案,如分布式文件系统
、
数据库等,作为数据的逻辑存储介质
。3.
根据权利要求2所述的一种底层数据模型的储存介质,其特征在于:所述存储介质包括:数据存储和检索
、
数据安全和隐私防护
、
扩展性和可伸缩性
、
兼容性和互操作性
。4.
根据权利要...
【专利技术属性】
技术研发人员:孙勇,王景田,樊鹏华,袁宁廷,柳晓萍,张鸽,段宇平,李春生,宋飒,
申请(专利权)人:国网西藏电力有限公司信息通信公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。