一种集数据的组织、整合、治理、融合及分析的统计系统技术方案

技术编号:40148187 阅读:19 留言:0更新日期:2024-01-24 00:46
本发明专利技术公开了一种集数据的组织、整合、治理、融合及分析的统计系统,涉及数据统计技术领域,包括包括作为反向代理服务器的前置Nginx模块;提供不同微服务之间的通信和相互操作的网关服务模块;管理用户访问权限和认证的服务的统一鉴权服务模块;管理和监控后端系统服务的平台管理服务模块。本发明专利技术与传统的使用Excel等数据分析工具或者专业人士手写SQL语句进行数据聚合分析统计相比,本发明专利技术采用了直观的“拖拉拽”方式,使普通人也能够轻易进行数据匹配和分析统计,无需使用数据库客户端连接工具登录数据库服务器编写SQL语句。这种方法极大地降低了操作的复杂性,使数据统计分析和匹配查询变得更加普及和易于掌握。

【技术实现步骤摘要】

本专利技术涉及数据统计,具体是一种集数据的组织、整合、治理、融合及分析的统计系统


技术介绍

1、在统一大数据平台建设及数据建模和治理方面,数据分散在不同网络,由于边界复杂,导致数据存在壁垒,形成数据孤岛。早期信息化建设以满足应急性需求为主要目的,缺乏统一规划,各类数据服务输出能力弱,缺乏数据治理、分析、应用人员和强有力的工具支撑,无手段或手段比较落后,难以满足支撑全种类的服务需求。当前,信息化正在开启以数据深度挖掘和融合应用为主要特征的智能化阶段,数字化向“万物数据化”发展,网络化向“万物皆互联”发展,智能化通过对数据的深度融合与挖掘,帮助人们采用新的视角和新的手段,掌握事物的全局态势和细微差别,归纳事物发展规律预测预判事物未来状态,分析各种计划和政策的可能结果为决策提供最佳选项。

2、传统的数据分析方法通常包括将数据导入excel,并借助excel的函数对数据进行聚合和统计分析。然而,这种传统数据分析方式存在以下问题:首先,当大量海量数据被导入到excel中时,受限于个人电脑的有限cpu和内存资源,excel文件可能会出现卡顿甚至无响应的情本文档来自技高网...

【技术保护点】

1.一种集数据的组织、整合、治理、融合及分析的统计系统,其特征在于:包括作为反向代理服务器的前置Nginx模块;

2.根据权利要求1所述的一种集数据的组织、整合、治理、融合及分析的统计系统,其特征在于:所述前置Nginx模块在客户端和后端服务器之间起中介作用,所述客户端包括APP、Web页面和外部服务接入,前置Nginx模块的输出端连接网关服务模块,网关服务模块的输出端连接统一鉴权服务模块和微服务集群,所述网关服务模块的输出端还连接nacos注册中心、配置中心、sentinel模块和skyWalking模块组成的集群,所述统一鉴权服务模块和微服务集群的输出端同时连接Redis...

【技术特征摘要】

1.一种集数据的组织、整合、治理、融合及分析的统计系统,其特征在于:包括作为反向代理服务器的前置nginx模块;

2.根据权利要求1所述的一种集数据的组织、整合、治理、融合及分析的统计系统,其特征在于:所述前置nginx模块在客户端和后端服务器之间起中介作用,所述客户端包括app、web页面和外部服务接入,前置nginx模块的输出端连接网关服务模块,网关服务模块的输出端连接统一鉴权服务模块和微服务集群,所述网关服务模块的输出端还连接nacos注册中心、配置中心、sentinel模块和skywalking模块组成的集群,所述统一鉴权服务模块和微服务集群的输出端同时连接redis集群,微服务集群还连接外接服务和平台ob模块,微服务集群中包含数据建模服务模块,该数据建模服务模块连接数据库,数据库输出端连接中间件,所述微服务集群输入端还连接有k8s集群,所述k8s集群连接jenkins模块,所述jenkins模块连接git模块,所述数据库的输入端还连接一网共享数据模块和自定义上传数据模块。

3.根据权利要求1所述的一种集数据的组织、整合、治理、融合及分析的统计系统...

【专利技术属性】
技术研发人员:颜昊黄利唐峰峰王浩敖伟张健
申请(专利权)人:惠州市科晟信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1