一种大数据处理导出系统技术方案

技术编号:39577167 阅读:7 留言:0更新日期:2023-12-03 19:28
本发明专利技术公开了一种大数据处理导出系统,包括信息录入模块

【技术实现步骤摘要】
一种大数据处理导出系统


[0001]本专利技术涉及大数据处理
,具体为一种大数据处理导出系统


技术介绍

[0002]大数据,指无法在一定时间范围内用常规软件工具进行捕捉

管理和处理的数据集合,是需要新处理模式才能具有更强的决策力

洞察发现力和流程优化能力来适应海量

高增长率和多样化的信息资产,随着电子信息化的飞速发展,电子信息数据逐渐成为人们研究的重点,人们日常生活均离不开各种各样的数据,进而大数据成了目前研究的热点,随着现代信息技术的不断发展,世界已跨入了互联网
+
大数据时代

全球正掀起以融合

渗透

创新为特点的新一轮信息革命,大数据已成为世界主要国家抢占新一轮经济和科技发展制高点的重大战略选择

[0003]现有技术中,如中国专利申请号:
CN 114564531 A
公开了一种大数据处理导出系统,包括大数据收集系统

大数据处理系统

大数据导出系统

查询系统与输入模块,本专利技术通过大数据收集系统对大数据进行收集,再通过大数据处理系统中大数据采集模块对大数据收集系统收到的信息进行筛选,并通过大数据接收模块对筛选之后的大数据信息进行接收,由大数据处理模块对接收之后的信息进行分析处理,并由大数据归纳模块对分析之后的大数据信息进行归纳整理,通过查询系统查询所需的大数据信息,在查找到所需的大数据信息之后,通过导出文件生成模块将所需大数据信息进行接收生成,并保存至待导出文件夹中

[0004]但上述专利存在以下不足:
[0005]数据的传达流程主要依靠用户对系统所下达的指令,此时再由系统根据指令中包含的信息调取出内部存储的相应数据,再通过接收设备对反馈的数据进行查阅,上述专利所提出的方案,可对部分数据内容进行甄别,并通过归纳整理的方式筛选出可访问此类数据的用户,从而达到对机密文件的保护,但仍存在一些不足,如:该数据输出的模式依旧为逐条发送的方式,当用户数量增大后,该系统的负荷量也逐渐增高,从而直接影响数据的导出效率,严重会导致系统的崩溃

[0006]所以我们提出了一种大数据处理导出系统,以便于解决上述中提出的问题


技术实现思路

[0007]本专利技术的目的在于提供一种大数据处理导出系统,通过信息录入模块进行指令信息的录入,并利用信息的进入顺序为用户进行排列,由筛选单元判断指令信息的内容,初步将相同内容的信息进行整合,缩小信息的条数,再由应用服务器根据每组指令信息确定所需数据的数量,该系统的作用在于初步通过一个时间段内,确定用户的数量,并先区分每种指令信息,将相同的信息打包整合,进而较少进入后续系统中的数量,使得系统无需逐条进行搜索,只需根据需求用户的数量分发同种数据的条数,实现系统降低负荷的条件,同时多种数据的导出,也是采用上述步骤进行相同数据的打包,并通过分组的方式进行发送,以解
决上述
技术介绍
所存在的不足

[0008]为实现上述目的,本专利技术提供如下技术方案:一种大数据处理导出系统,包括信息录入模块

筛选单元

应用服务器

数据同步系统

数据库

大数据计算模块

大数据储存模块和数据接收单元;
[0009]所述信息录入模块,用于确定用户数量的统计,根据信息的进入顺序判定用户的排列位置,并依次将导入的指令信息进一步传输到系统内部;
[0010]所述筛选单元,用于判别每种指令的内容,并将相同指令的用户进行整合,进一步缩小系统的排列范围;
[0011]所述应用服务器,用于对指令内容的整合,确定该时段内每种指令内容所要答复的数量;
[0012]所述数据同步系统,用于确定所需答复内容的数量,并将多种指令信息同步导入系统终端内;
[0013]所述数据库,用于调取每种指令信息所要答复的数据内容,为后期每种数据的导出提供条件;
[0014]所述大数据计算模块,用于将所得的数据内容和用户相配对,避免发生错发和漏发的问题;
[0015]所述大数据储存模块,用于对用户信息和所需数据进行存储,进而系统可根据某位用户的常搜内容生成相关数据进而推荐,提高后期人机交互的能力;
[0016]所述数据接收单元,用于对每种数据的甄别,并将相同的多组数据同步导出至所需用户的接收设备中,从而剔除逐条发送,缩短数据导出时间

[0017]优选的,所述信息录入模块的输出端和筛选单元的输入端信号连接,所述筛选单元的输出端和应用服务器的输入端电性连接,所述应用服务器的输出端和数据同步系统的输入端信号连接,所述数据同步系统的输出端和数据库的输入端信号连接,确定用户导入的指令信息在筛选单元

应用服务器

数据同步系统和数据库中传输顺序,为多种指令信息的区分与整合提供必要的条件

[0018]优选的,所述数据库的输出端和大数据计算模块的输入端信号连接,所述大数据计算模块和大数据储存模块双向信号连接,所述大数据计算模块的输出端和数据接收单元的输入端信号连接,所述数据接收单元的输出端通过网络传输的方式与信息录入模块的输入端信号连接,设置大数据储存模块,可对某位用户的身份信息和常搜索的内容进行存储,便于后续对相似数据的推荐

[0019]优选的,所述筛选单元包括内容识别模块和类别区分模块
A

[0020]所述内容识别模块,用于对进入到系统中多个指令信息进行识别,并根据数据库中所包含的数据,判断是否具备数据导出的能力;
[0021]所述类别区分模块
A
,用于对每种的指令信息的区分,并将相同的信息进行初步整合

[0022]优选的,所述数据接收单元包括类别区分模块
B
和同步传输模块;
[0023]所述类别区分模块
B
,用于对多种数据内容进行区分,并把多种相同数据打包整合,缩小数据的排列长度;
[0024]所述同步传输模块,用于将分类后的每组数据进行导出,解决每种数据逐条发送
所存在的不足,缩短数据导出的时间

[0025]与现有技术相比,本专利技术的有益效果是:
[0026]本专利技术通过信息录入模块进行指令信息的录入,并利用信息的进入顺序为用户进行排列,由筛选单元判断指令信息的内容,初步将相同内容的信息进行整合,缩小信息的条数,再由应用服务器根据每组指令信息确定所需数据的数量,该系统的作用在于初步通过一个时间段内,确定用户的数量,并先区分每种指令信息,将相同的信息打包整合,进而较少进入后续系统中的数量,使得系统无需逐条进行搜索,只需根据需求用户的数量分发同种数据的条本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.
一种大数据处理导出系统,其特征在于:包括信息录入模块
(1)、
筛选单元
(2)、
应用服务器
(3)、
数据同步系统
(4)、
数据库
(5)、
大数据计算模块
(6)、
大数据储存模块
(7)
和数据接收单元
(8)
;所述信息录入模块
(1)
,用于确定用户数量的统计,根据信息的进入顺序判定用户的排列位置,并依次将导入的指令信息进一步传输到系统内部;所述筛选单元
(2)
,用于判别每种指令的内容,并将相同指令的用户进行整合,进一步缩小系统的排列范围;所述应用服务器
(3)
,用于对指令内容的整合,确定该时段内每种指令内容所要答复的数量;所述数据同步系统
(4)
,用于确定所需答复内容的数量,并将多种指令信息同步导入系统终端内;所述数据库
(5)
,用于调取每种指令信息所要答复的数据内容,为后期每种数据的导出提供条件;所述大数据计算模块
(6)
,用于将所得的数据内容和用户相配对,避免发生错发和漏发的问题;所述大数据储存模块
(7)
,用于对用户信息和所需数据进行存储,进而系统可根据某位用户的常搜内容生成相关数据进而推荐,提高后期人机交互的能力;所述数据接收单元
(8)
,用于对每种数据的甄别,并将相同的多组数据同步导出至所需用户的接收设备中,从而剔除逐条发送,缩短数据导出时间
。2.
根据权利要求1所述的精密交换齿轮热处理装置,其特征在于:所述信息录入模块
(1)
的输出端和筛选单元
(2)
的输入端信号连接,所述筛选单元
(2)
的输出端和应用服务器
(3)
的输入端电性连接,所述应用服务器
(3)
的输出端...

【专利技术属性】
技术研发人员:朱庆元
申请(专利权)人:上海亓康医疗科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1