物联网异构数据存储方法及系统技术方案

技术编号:9173792 阅读:217 留言:0更新日期:2013-09-19 23:09
本发明专利技术公开一种物联网异构数据存储方法及系统,所述方法通过HBase分布式存储系统对各种类型的数据进行基于列的存储,并通过MySQL元数据库对存储的数据进行登记管理,最后对数据访问层进行统一配置,使得基于该数据库的应用都能使用统一的数据接口。本发明专利技术在数据接口采用统一的存储方式,有效的支持不同来源、不同类型数据的存储;利用HBase技术,扩大列导向的存储机制,使得存储容量可水平扩展;采用内存映射文件机制,有效的解决了大文件存储和管理的效率;采用数据冗余存放技术,大大提高系统的可靠性和访问性能。本发明专利技术能很好的解决不同类型数据的存储问题,对大文件具有高效的存储和利用能力,另外还有低成本和高鲁棒性。

【技术实现步骤摘要】

【技术保护点】
一种物联网异构数据存储方法,其特征在于该方法通过HBase分布式存储系统对各种类型的数据进行基于列的存储,并通过MySQL元数据库对存储的数据进行登记管理,最后对数据访问层进行统一配置,使得基于该数据库的应用都能使用统一的数据接口;所述方法包括如下步骤:(1)系统前端将需要存储的数据送入数据存储系统;(2)在步骤(1)所述数据存储系统采用HBase技术搭建的异构存储集群中,为不同类型的数据指定存储列簇;(3)MySQL元数据库对不同类型的存储数据进行进行登记,通过注册服务器向MySQL元数据库中登记数据信息,在将数据存储在步骤(2)中所述数据存储系统前,会对接收的数据标识信息和元数据库中的信息...

【技术特征摘要】

【专利技术属性】
技术研发人员:孙琦江文王伊凡李生红陈乐生
申请(专利权)人:上海和伍新材料科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1