基于分布式架构的数字图书馆大数据存储系统技术方案

本发明专利技术公开了一种基于分布式架构的数字图书馆大数据存储系统，该系统包括：现有数据存储层、分布式数据存储层、分布式数据处理层以及大数据服务接口层；其中，所述现有数据存储层主要完成所采集数据的初选和过滤，为所述分布式数据存储层提供预处理后的高价值数据；所述分布式数据存储层保证数字图书馆大数据存储系统架构的可扩展性；所述分布式数据处理层基于所述分布式数据存储层支持，完成大数据的价值提取以及知识发现；所述大数据服务接口层是图书馆大数据服务的数据接口，利用所述分布式数据处理层所提供的结果数据为不同的大数据应用系统提供安全、高效、经济、可靠的数据传输服务。

Large Data Storage System of Digital Library Based on Distributed Architecture

【技术实现步骤摘要】
基于分布式架构的数字图书馆大数据存储系统
本专利技术属于大数据存储
，涉及一种基于分布式架构的数字图书馆大数据存储系统。
技术介绍
随着信息技术的发展与读者阅读需求的转变，云计算、大数据、物联网和传感器网络等技术，已成为数字图书馆构建与用户服务保障的关键技术。新技术的应用与服务模式的变革，大幅提高了图书馆服务系统的结构科学性、保障力和用户满意度。但是，图书馆在用户服务与系统管理、读者阅读活动保障、自动传感器数据采集和移动阅读终端阅读等过程中，产生了海量和级数递增的大数据资源，图书馆数据环境呈现数据体量巨大(Volume)、类型繁多(Variety)、价值密度低(Value)、处理速度快(Velocity)的4V大数据特征。此外，非结构化数据占据图书馆总量的85％以上，并且读者对大数据资源的价值密度和可用性要求较高。所以数字图书馆传统的关系数据库数据存储方式已不能满足大数据存储与处理需求。因此，加强大数据存储系统架构的科学性、安全性、可用性和可扩展性，确保大数据资源可以安全、高效、灵活和经济地被存储、访问、查询和分析，是关系图书馆数据存储与管理效率，保证大数据资源挖掘和数据价值发本文档来自技高网...

【技术保护点】
1.一种基于分布式架构的数字图书馆大数据存储系统，其特征在于，所述系统包括：现有数据存储层、分布式数据存储层、分布式数据处理层和大数据服务接口层四部分；其中，所述现有数据存储层主要完成所采集数据的初选和过滤，为所述分布式数据存储层提供预处理后的高价值数据；所述分布式数据存储层保证数字图书馆大数据存储系统架构的可扩展性；所述分布式数据处理层基于所述分布式数据存储层支持，完成大数据的价值提取以及知识发现；所述大数据服务接口层是图书馆大数据服务的数据接口，利用所述分布式数据处理层所提供的结果数据为不同的大数据应用系统提供安全、高效、经济、可靠的数据传输服务。

【技术特征摘要】
1.一种基于分布式架构的数字图书馆大数据存储系统，其特征在于，所述系统包括：现有数据存储层、分布式数据存储层、分布式数据处理层和大数据服务接口层四部分；其中，所述现有数据存储层主要完成所采集数据的初选和过滤，为所述分布式数据存储层提供预处理后的高价值数据；所述分布式数据存储层保证数字图书馆大数据存储系统架构的可扩展性；所述分布式数据处理层基于所述分布式数据存储层支持，完成大数据的价值提取以及知识发现；所述大数据服务接口层是图书馆大数据服务的数据接口，利用所述分布式数据处理层所提供的结果数据为不同的大数据应用系统提供安全、高效、经济、可靠的数据传输服务。2.根据权利要求1所述的基于分布式架构的数字图书馆大数据存储系统，其特征在于，所述现有数据存储层负责通过减少原始大数据资源的数据总量及增加其价值密度，降低大数据的存储负载和缩短大数据应用时间。3.根据权利要求1所述的基于分布式架构的数字图书馆大数据存储系统，其...

【专利技术属性】
技术研发人员：周峻松，徐继峰，祁建明，陈墩金，
申请(专利权)人：广州明领基因科技有限公司，
类型：发明
国别省市：广东,44