一种存储并检索数据的方法以及系统技术方案

技术编号:22847688 阅读:32 留言:0更新日期:2019-12-17 23:01
本发明专利技术公开了一种存储并检索数据的方法以及系统,方法包括:数据存储步骤:将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;数据同步步骤:定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;检索步骤:搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。本发明专利技术可以实现快速搜索大量存在的任何单词或单词组的非结构化文本,存储效率和检索效率高,优选的,还可以提供查看详情,通过查询关系型数据库,保证了结构化数据的优势,本发明专利技术随着数据量越来越大,优势会越来越明显。

A method and system for storing and retrieving data

【技术实现步骤摘要】
一种存储并检索数据的方法以及系统
本专利技术涉及互联网领域,尤其涉及一种存储并检索数据的方法以及系统。
技术介绍
目前的很多系统需要实现数据存储并检索的功能。如果采用关系型数据库存储并检索数据,则难以实现的快速搜索大量存在的任何单词或单词组的非结构化文本;如果使用非关系型数据库进行存储检索,在数据量较大时,检索效率较低,并不能满足人们对检索的高效要求。
技术实现思路
本专利技术要解决的技术问题在于,针对现有技术的上述缺陷,提供一种存储并检索数据的方法以及系统。本专利技术解决其技术问题所采用的技术方案是:构造一种存储并检索数据的方法,方法包括:数据存储步骤:将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;数据同步步骤:定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;检索步骤:搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。在本专利技术所述的存储并检索数据的方法中,所述的将需要存储的数据按照数据类型存储本文档来自技高网...

【技术保护点】
1.一种存储并检索数据的方法,其特征在于,方法包括:/n数据存储步骤:将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;/n数据同步步骤:定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;/n检索步骤:搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。/n

【技术特征摘要】
1.一种存储并检索数据的方法,其特征在于,方法包括:
数据存储步骤:将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;
数据同步步骤:定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;
检索步骤:搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。


2.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述的将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中,包括:
将需要存储的非关系型数据存储到非关系型数据库中;
将需要存储的关系型数据存储到关系型数据库中,并将关系型数据中的符合预设的常见检索数据的字段数据存储到非关系型数据库中。


3.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述方法应用于管理平台,其中:需要存储的关系型数据来自WEB录入页面获取到的用户录入的数据;需要存储的非关系型数据来自需要存储的关系型数据中的符合预设的常见检索数据的字段数据,以及管理平台中的某些模块产生的数据。


4.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述非关系型数据库为Mongodb,所述数据同步步骤具体包括:
定时调用Mongodb的映射归约方法对Mongodb中存储的数据进行聚合处理得到聚合结果;
将所述聚合结果由Mongodb的数据同步工具同步到搜索引擎。


5.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述检索步骤具体包括:
搜索引擎获取WEB检索页面上传的用户输入的关键字;
搜索引擎根据所述关键字基于所述聚合结果进行检索;
搜索引擎将检索结果按照预设排序规则进行排序并呈现给用户,并提供与该检索结果相关的关系型数据库的接口以供用户查看详情。


6.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述搜索引擎为ElasticSearch,所述非关系型数据库为Mongod...

【专利技术属性】
技术研发人员:苏县伟宋延平
申请(专利权)人:深圳艾派网络科技股份有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1