一种关联数据获取方法、装置、设备及存储介质制造方法及图纸

技术编号:23343400 阅读:41 留言:0更新日期:2020-02-15 03:54
本发明专利技术公开了一种关联数据获取方法、装置、设备及存储介质。该方法包括:对原始数据进行处理获得有效数据,将有效数据保存在数据仓库中;根据预设参数从数据仓库中抽取出关联数据,其中,预设参数包括关联字段或项目编号。本发明专利技术实施方式中通过对原始数据进行处理获得有效数据,并将有效数据保存在数据仓库中,并根据预设参数可以从数据仓库中抽取出关联数据,实现了从大数据中有效获取出关联数据,从而提高了用户的体验效果。

A method, device, device and storage medium for acquiring associated data

【技术实现步骤摘要】
一种关联数据获取方法、装置、设备及存储介质
本专利技术实施例涉及数据处理
,尤其涉及一种关联数据获取方法、装置、设备及存储介质。
技术介绍
随着信息的爆发式增长和积累,大数据在人们生活中得到越来越多的应用。大数据的基本特征就是数据量大、类型繁多、价值密度低以及速度快时效高。因此从中获取有效价值成为人们研究的重点。专利技术人在实现本专利技术的过程中,发现现有技术存在如下缺陷:大量的数据中往往会包含对用户决策和企业运营带来潜在价值或风险的关键数据目标,而数据目标之间的关联关系非常复杂,而且一般是隐藏的,因此目前并不能从大数据中有效获取出关联数据,从而影响用户的体验效果。
技术实现思路
本专利技术提供一种关联数据获取方法、装置、设备及存储介质,以实现对原始数据中的关联数据的抽取。第一方面,本专利技术实施例提供了一种关联数据获取方法,该方法包括:原始数据进行处理获得有效数据,将有效数据保存在数据仓库中;根据预设参数从数据仓库中抽取出关联数据,其中,预设参数包括关联字段或项目编号。第二方面,本专利技术实施本文档来自技高网...

【技术保护点】
1.一种关联数据获取方法,其特征在于,包括:/n对原始数据进行处理获得有效数据,/n将所述有效数据保存在数据仓库中;/n根据预设参数从所述数据仓库中抽取出关联数据,其中,所述预设参数包括关联字段或项目编号。/n

【技术特征摘要】
1.一种关联数据获取方法,其特征在于,包括:
对原始数据进行处理获得有效数据,
将所述有效数据保存在数据仓库中;
根据预设参数从所述数据仓库中抽取出关联数据,其中,所述预设参数包括关联字段或项目编号。


2.根据权利要求1所述的方法,其特征在于,所述对原始数据进行处理获得有效数据包括:
对所述原始数据进行清洗获得清洗后的数据;
根据实时性要求对所述清洗后的数据进行分类处理获得所述有效数据,其中,所述有效数据包括:实时性数据和非实时性数据。


3.根据权利要求2中所述的方法,其特征在于,所述数据仓库包括:实时数据缓存结构、被数据仓库结构和主动决策引擎结构。


4.根据权利要求3所述的方法,其特征在于,所述将所述有效数据保存在数据仓库中,包括:
将所述实时性数据保存在所述实时数据缓存结构和所述主动决策引擎结构中;
对保存在所述实时数据缓存结构中的数据进行批量加载处理后保存在所述被数据仓库结构中。


5.根据权利要求3所述的方法,其特征在于,所述将所述有效数据保存在数据仓库中,包括:
将所述非实时性数据保存在所述主动决策引擎结构中。


6.根据权利要求3所述的方法,其特征在于,所述根据预...

【专利技术属性】
技术研发人员:王林谢永恒火一莽
申请(专利权)人:北京锐安科技有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1