一种大数据海量数据快速检索方法技术

技术编号:31493107 阅读:32 留言:0更新日期:2021-12-18 12:30
本发明专利技术公开了一种大数据海量数据快速检索方法,涉及大数据处理技术领域,旨在解决数据量变得非常庞大后,关系型数据库查询的效率会变得很低,数据库查询太消耗内存的问题,本发明专利技术通过建立大数据海量数据存储系统,用以存储日益增长的大数据,利用存储服务器与云端存储相结合,保证了大数据的数据安全,确保存储空间的可扩展,提升数据存放可靠性,通过建立分布式数据库服务系统,利用分布式数据节点对用户提交的数据关键词进行并行检索,极大提高检索速度,初步得到目标检索区域,通过根据初步反馈的检索结果再对海量数据进行进一步搜索,将检索结果基于用户网络使用习惯大数据进行筛选并排序,更加符合用户的需求。更加符合用户的需求。

【技术实现步骤摘要】
一种大数据海量数据快速检索方法


[0001]本专利技术涉及大数据处理
,具体为一种大数据海量数据快速检索方法。

技术介绍

[0002]大数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
[0003]对于“大数据”(Bigdata)研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。
[0004]大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理,换而言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。
[0005]从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种大数据海量数据快速检索方法,其特征在于,包括以下步骤:步骤一,建立大数据海量数据存储系统;步骤二,建立分布式数据库服务系统;步骤三,创建海量数据索引云服务平台;步骤四,用户在网络终端输入数据关键词,产生检索请求发送到分布式数据节点;步骤五,所述分布式数据节点将所述检索请求发送至网络中的其他所述分布式数据节点,所有所述分布式数据节点在所述海量数据索引云服务平台中同步进行检索并标记已检索数据索引;步骤六,发现数据关键词相关联目标数据索引,所述分布式数据节点根据数据索引在所述数据存储系统中查询带有数据关键词的数据;步骤七,所述分布式数据服务系统根据用户搜索习惯大数据筛选排序查询结果,将所述查询结果发回至所述网络终端上。2.根据权利要求1所述的一种大数据海量数据快速检索方法,其特征在于:所述大数据海量数据存储系统包括服务器硬件存储与云端存储,所述云端存储在网络中去中心化分布设立。3.根据权利要求1所述的一种大数据海量数据快速检索方法,其特征在于:所述分布式数据库服务系统包括若干个所述分布式数据节点且通过网络相互连通。4.根据权利要求1所述的一种大数...

【专利技术属性】
技术研发人员:刘全李战军郭晓丹
申请(专利权)人:青岛优加教育科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1