【技术实现步骤摘要】
一种面向大数据的数据处理方法和装置
[0001]本专利技术涉及大数据
,尤其涉及一种面向大数据的数据处理方法和装置。
技术介绍
[0002]大数据或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。
[0003]目前市场上已有的大数据利用在一定时间内用非常规软件工具对其内容进行抓取、管理和处理的数据集合,导致大数据中对某一条数据的信息会有许多冗余的信息记录,过多的冗余信息记录,导致工作人员对提取到重复的数据。
[0004]为此,我们提出一种面向大数据的数据处理方法和装置。
技术实现思路
[0005]本专利技术主要是解决上述现有技术所存在的技术问题,提供一种面向大数据的数据处理方法和装置。
[0006]为了实现上述目的,本专利技术采用了如下技术方案,一种面向大数据的数据处理方法,包括以下步骤:
[0007]第一步:数据搜索请求;
[0008]第二步:历史信息存储; >[0009]第三步本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种面向大数据的数据处理方法,其特征在于:包括以下步骤:第一步:数据搜索请求;第二步:历史信息存储;第三步:寻找数据信息;第四步:关键字截取;第五步:标记历史搜索记录;第六步:数据信息范围筛选;第七步:范围信息记录;第八步:缩小筛选范围。2.根据权利要求1所述的一种面向大数据的数据处理方法和装置,其特征在于:所述第一步通过用户将提交需要搜索的数据信息;所述第二步将用户提交的需要搜索的数据信息存储在历史记录集中。3.根据权利要求1所述的一种面向大数据的数据处理方法和装置,其特征在于:所述第三步查询请求条件与数据库中的对象或者属性进行匹配,若结果匹配,跳至第六步,并调用数据库中包含相关的对象或者属性中的数据预处理结果集合,将数据库中包含相关的对象或者属性中的数据预处理结果集合直接向外输出。4.根据权利要求1所述的一种面向大数据的数据处理方法和装置,其特征在于:所述第四步将用户提交的需要搜索的数据信息依次分成多个单独的数据信息,或者用户根据原本的需要搜索的数据信息对每个单独的数据进行合并,将原本的需要的检索数据信息,分成多段,依次对单独的数据信息或者依次对一段数据信息进行检索,如果有相匹配的数据信息,跳至第六步,将数据库中包含相关的对象或者属性中的数据预处理结果集合直接向外输出,同时将没有检索到的数据信息进行标记,存储在历史查询集中。5.根据权利要求1所述的一种面向大数据的数据处理方法和装置,其特征在于:所述第五步回到第一步,读取用户初始提交的数据信息,并将用户原本提交的数据信息删除,在历史查询集中查找读取到的用户初始提交的数据信...
【专利技术属性】
技术研发人员:李锦基,黄永权,李明东,陈义文,付长财,
申请(专利权)人:深圳市高德信通信股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。