一种复杂数据处理方法技术

技术编号:41333506 阅读:35 留言:0更新日期:2024-05-20 09:53
本申请公开了一种复杂数据处理方法,涉及数据处理技术领域,通过数据处理模型将目标筛选模板的执行参数生成查询指令集;将查询指令集发送到数据处理引擎,以供数据处理引擎基于查询指令集在连接的各目标数据源中获取数据;通过数据处理模型将数据进行标准化后,将数据导入目标收集模板进行分析。通过数据处理引擎可以与各数据源进行连接,数据处理引擎基于查询指令从各目标数据源中获取满足目标筛选模板的筛选条件的数据,并将数据导入收集模板。工作人员只需要根据研究场景设置对应的收集模板和筛选模板即可,不需要根据研究场景进行软件开发,减少了前期准备时间,提高了数据处理效率。

【技术实现步骤摘要】

本申请涉及数据处理,更具体地说,涉及一种复杂数据处理方法


技术介绍

1、在基于真实世界的各种研究场景中,经常会涉及对大量数据进行分析的情况。如:治疗效果研究、风险指标监测等研究场景下,可能会需要对多数据集、多指标进行meta分析或者指标监测。在进行分析或监测时,需要的研究数据可能存储在不同的数据源中,故需要从不同的数据源中提取需要的研究数据。此外,不同研究场景下,所需要的研究数据也各不相同。

2、由于研究或监测所需要的数据分别存放于多个不同的数据源中,使得数据存放复杂,当需要进行数据处理或者数据分析时,则需要分别针对每个数据源中的研究数据进行单独的指定分析任务的开发工作,再分别对不同数据源中研究数据的分析结果进行汇总,获得最终的分析结果。但是,现有复杂数据处理方法对数据分析、处理任务的开发投入高、时间长,数据处理效率较低。


技术实现思路

1、有鉴于此,本申请提供了一种复杂数据处理方法,用于解决现有复杂数据处理方法,对数据分析、处理任务的开发投入高、时间长,数据处理效率较低的问题。

2本文档来自技高网...

【技术保护点】

1.一种复杂数据处理方法,其特征在于,包括:

2.根据权利要求1所述的复杂数据处理方法,其特征在于,用户根据当前数据处理任务生成目标收集模板和目标筛选模板,其过程包括:

3.根据权利要求2所述的复杂数据处理方法,其特征在于,还包括:

4.根据权利要求1所述的复杂数据处理方法,其特征在于,判断所述目标处理模板对的执行参数是否需要修改之后,还包括:

5.根据权利要求1所述的复杂数据处理方法,其特征在于,将所述标准数据集合中的数据导入所述目标收集模板之后,还包括:

6.根据权利要求1所述的复杂数据处理方法,其特征在于,还包括:

...

【技术特征摘要】

1.一种复杂数据处理方法,其特征在于,包括:

2.根据权利要求1所述的复杂数据处理方法,其特征在于,用户根据当前数据处理任务生成目标收集模板和目标筛选模板,其过程包括:

3.根据权利要求2所述的复杂数据处理方法,其特征在于,还包括:

4.根据权利要求1所述的复杂数据处理方法,其特征在于,判断所述目标处理模板对的执行参数是否需要修改之后,还包括:

5.根据权利要求1所述的复杂数据处理方法,其特征在于,将所述标准...

【专利技术属性】
技术研发人员:李世安李榆彬龙翔何秋芳
申请(专利权)人:深圳安科百腾科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1