一种数据分析系统、方法以及装置制造方法及图纸

技术编号:41907237 阅读:9 留言:0更新日期:2024-07-05 14:11
一种数据分析系统,该系统包括:特征提取模块,包括第一层算子和第二层算子至少两层特征算子,第一层算子基于元数据提取目标特征,当第一层算子未提取到所述目标特征时第二层算子提取所述目标特征,第二层算子的复杂度高于第一层算子的复杂度;元数据包括第一用户确定的针对第一数据集的数据子集,第一数据集包括一组数据的集合,算子推荐模块,基于目标特征确定第一算子集,所述第一算子集用于所述第一数据集的分析。该阶梯式的特征提取框架能够提高数据特征提取效率,进而迅速的为时序数据源推荐出合适的分析算子,提升了复杂数据场景下时序数据算法推荐的效率以及用户的体验。

【技术实现步骤摘要】

本申请涉及信息,并且更具体地,涉及一种数据分析系统、方法以及装置


技术介绍

1、随着信息技术的发展,对数据库的需求越来越大。目前数据库的种类也比较多,例如,关系型数据库和时序数据库。其中,对时序数据库的需求上升尤为明显。

2、时序数据库中存储的数据通常称为时序数据,基于时序数据展开的时序分析可以挖掘时序数据内部的更深层次的价值。常见的时序分析包括时序异常检测、时序预测、聚类、关联分析等。针对数据量大、格式复杂多样的时序数据,可以提供基本的时序异常检测以及预测场景,例如,云厂商aws可以基于元数据提供低计算量的以字段属性以及数据维度可视化智能分析的能力。再例如,高性能的rcf算法,单一的算法可以满足简单的用户需求。当数据种类逐渐丰富,数据库日益增大,基于数据库进行的算法推荐的复杂度明显上升,时序数据的算法推荐效率也很低。

3、因此,如何针对复杂的数据库进行算法推荐,提高算法推荐的效率以及提升用户体验,成为亟需要解决的技术问题。


技术实现思路

1、本申请提供一种数据分析系统、方法以及装置本文档来自技高网...

【技术保护点】

1.一种数据分析系统,其特征在于,所述系统包括:

2.根据权利要求1所述的系统,其特征在于,所述第一层算子具体用于对所述元数据进行计算得到第一特征值,当所述第一特征值满足第一条件时,所述第一层算子提取到所述目标特征;当所述第一特征值不满足所述第一条件时,所述第二层算子具体用于,对所述元数据进行计算得到第二特征值,当所述第二特征值满足所述第一条件时,所述第二层算子提取到所述目标特征。

3.根据权利要求1或2所述的系统,其特征在于,所述算子推荐模块具体用于基于参考特征集合和所述目标特征确定所述第一算子集,所述参考特征集合为基于训练数据集用预置算子集计算得到的特征值集合...

【技术特征摘要】

1.一种数据分析系统,其特征在于,所述系统包括:

2.根据权利要求1所述的系统,其特征在于,所述第一层算子具体用于对所述元数据进行计算得到第一特征值,当所述第一特征值满足第一条件时,所述第一层算子提取到所述目标特征;当所述第一特征值不满足所述第一条件时,所述第二层算子具体用于,对所述元数据进行计算得到第二特征值,当所述第二特征值满足所述第一条件时,所述第二层算子提取到所述目标特征。

3.根据权利要求1或2所述的系统,其特征在于,所述算子推荐模块具体用于基于参考特征集合和所述目标特征确定所述第一算子集,所述参考特征集合为基于训练数据集用预置算子集计算得到的特征值集合,所述预置算子集包括所述至少两层算子的部分或全部算子。

4.根据权利要求3所述的系统,其特征在于,所述算子推荐模块具体用于确定所述目标特征与所述参考特征集合中参考特征的相似度,当所述目标特征与第一参考特征的相似度大于相似度阈值时,确定所述第一参考特征对应的第一算子集为所述目标特征的算子集,所述第一算子集属于所述预置算子集,所述第一参考特征属于所述参考特征集合。

5.根据权利要求1-4项中任一项所述的系统,其特征在于,所述系统还包括:算子评估模块,用于评估自定义算子的复杂度,所述自定义算子的复杂度用于确定将所述自定义算子内置于所述特征提取模块中的至少两层特征算子的其中一层。

6.一种云服务系统中的数据分析方法,其特征在于,包括:

7.根据权利要求6所述的方法,其特征在于,所述第一层算子...

【专利技术属性】
技术研发人员:李伟琪黄飞腾黄永强
申请(专利权)人:华为云计算技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1