面向大数据分析的应用融合架构制造技术

本发明专利技术涉及一种面向大数据分析的应用融合架构，包括融合门户平台、能力开放平台和数据治理平台，融合门户平台用于支持统一用户管理、统一应用管理、统一认证、统一授权以及单点登录；能力开放平台用于提供统一数据共享交换服务、统一消息服务、统一物联服务以及统一AI服务；数据治理平台用于提供数据采集汇聚、数据标准化、主数据管理、元数据管理以及数据质量管理。本发明专利技术实现了业务数据与行为数据的融合，为大数据应用提供了基础。通过能力开放平台的数据共享交换服务开放给应用，为应用的大数据分析创造了条件。数据分析创造了条件。数据分析创造了条件。

【技术实现步骤摘要】
面向大数据分析的应用融合架构


[0001]本专利技术涉及大数据处理分析
，具体而言，涉及一种面向大数据分析的应用融合架构。

技术介绍

[0002]随着信息化时代的不断发展，当前政府机构和各行业企业信息化现状和特点是：业务应用多，由不同厂商建设，应用分散建设，应用之间数据不能有效共享，用户从各应用入口使用业务，体验不好，而且应用和用户行为数据不能有效用于大数据分析。
[0003]各厂商建设的业务应用无法有效融合，应用和用户未实现统一管理，各应用的数据标准不统一，数据无法有效融合。应用行为数据和用户行为数据未能充分利用，业务数据与行为数据融合创新困难。

技术实现思路

[0004]有鉴于此，本申请实施例的目的是提供一种面向大数据分析的应用融合架构，设计包含融合门户平台、能力开放平台和数据治理平台在内的融合架构，通过行为注册单元和行为采集网关，实现业务数据与行为数据的融合，为大数据应用提供了基础。
[0005]为实现上述目的，本专利技术提供了以下技术方案：根据本专利技术的第一方面，提供了一种面向大数据分析的应用融合架构，包括融合门户平台、能力开放平台和数据治理平台，所述融合门户平台用于支持统一用户管理、统一应用管理、统一认证、统一授权以及单点登录，所述融合门户平台包含行为采集网关，所述行为采集网关用于处理融合门户平台内置应用客户端和服务端交互的所有HTTP请求和响应；所述能力开放平台用于提供统一数据共享交换服务、统一消息服务、统一物联服务以及统一AI服务；所述数据治理平台用于提供数据采集汇聚、数据标准化、主数据管理、元数据管理以及数据质量管理。
[0006]作为本专利技术的进一步方案，所述融合门户平台的形态包括PC端和移动端，所述融合门户平台还用于供用户访问应用客户端，所述应用客户端通过HTTP协议访问应用服务端。
[0007]作为本专利技术的进一步方案，所述能力开放平台还用于通过HTTP协议的API（应用程序界面）提供统一数据共享交换服务、统一消息服务、统一物联服务以及统一AI服务。
[0008]作为本专利技术的进一步方案，所述能力开放平台包含行为注册单元和行为采集网关，所述行为注册单元用于接受各应用的行为注册，所述行为采集网关用于处理所有应用访问能力开发平台应用的HTTP请求和响应。
[0009]作为本专利技术的进一步方案，所述融合门户平台的行为采集网关通过HTTP协议访问应用库的应用服务端，所述应用库内包含应用数据库。
[0010]作为本专利技术的进一步方案，所述融合门户平台的行为采集网关以及所述能力开放
平台的行为采集网关内均设有行为日志数据库。
[0011]作为本专利技术的进一步方案，所述数据治理平台还用于同时从应用数据库和行为日志数据库采集数据，数据治理后分类形成包含行为数据在内的主题库，所述主题库包括业务数据主题库和行为主题库。
[0012]作为本专利技术的进一步方案，所述能力开放平台的数据共享交换服务还用于将所述业务数据主题库和所述行为主题库的数据开放给应用，为应用的大数据分析创造条件。
[0013]作为本专利技术的进一步方案，所述行为注册单元还用于通过定义行为的HTTP协议特征实现行为注册，并定义该行为的HTTP请求转发目标和数据解析规则，其中，所述HTTP协议特征包括：请求类型、请求URL、请求参数、响应状态码、响应头、响应体；所述转发目标包括转发主机和端口，行为注册的信息保存在行为注册单元的数据库中。
[0014]作为本专利技术的进一步方案，所述行为采集网关包括拦截器、转发器和分析器，所述行为采集网关通过拦截器和转发器处理HTTP请求的步骤包括：转发器获取转发规则列表，其中，所述转发器从行为注册信息数据库中获取转发规则列表，所述转发规则列表包括HTTP特征及转发目标，所述HTTP特征包括请求方法、URL及转发主机端口；拦截器接收应用的HTTP请求，将接受的请求数据进行缓存；拦截器将请求转发给转发器；转发器转发请求，其中，从请求报文中解析请求行，得到请求方法和URL，根据请求方法和URL从转发规则列表中找出对应的主机和端口，根据主机和端口，转发请求数据，请求行中的URL中主机和端口被修改转发目标的主机端口；转发器收到响应；转发器将响应数据转发给拦截器；拦截器处理响应数据，其中，将缓存的请求报文和收到响应报文放入待处理队列中；拦截器将HTTP响应返回给应用。
[0015]作为本专利技术的进一步方案，所述行为采集网关的分析器处理队列数据的步骤包括：分析器获取行为数据，其中，所述分析器从行为注册信息数据库中获取行为、HTTP特征以及数据解析规则；分析器从待处理队列获取一个待处理数据元素；分析器识别行为，其中，所述分析器从数据元素中的请求报文中解析请求行，得到请求方法和URL，根据请求方法、URL与HTTP特征匹配，识别对应的行为；分析器生成行为日志，其中，所述分析器根据数据解析规则使用半结构化解析技术，从请求数据和响应数据中解析高价值核心数据，形成行为日志；分析器保存行为日志，其中，保存行为日志到行为日志数据库中。
[0016]根据本专利技术实施例的第二方面，提供了一种计算机设备，包括：处理器；以及存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上述实施例中第一方面所述的面向大数据分析的应用融合架构中的步骤。
[0017]根据本专利技术的第三方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上述实施例中第一方面所述的面向大数据分析的应用融合架构中的步骤。
[0018]本专利技术实施例提供的技术方案可以包括以下有益效果：通过上述技术方案，本专利技术的一种面向大数据分析的应用融合架构，数据治理平台通过采集应用在融合门户的行为日志和应用访问能力开放平台的行为日志，治理之后形成业务数据和行为数据的主题库，实现了业务数据与行为数据的融合，为大数据应用提供了基础。通过能力开放平台的数据共享交换服务开放给应用，为应用的大数据分析创造了条件。
[0019]本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
[0020]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例。在附图中：图1示意性示出本专利技术示例性实施例中一种面向大数据分析的应用融合架构的整体架构图；图2示意性示出本专利技术示例性实施例中一种面向大数据分析的应用融合架构中行为注册单元和行为采集网关的架构图；图3示意性示出本专利技术示例性实施例中一种面向大数据分析的应用融合架构中行为采集网关拦截器和转发器处理HTTP请求的流程图；图4示意性示出本专利技术示例性实施例中面向大数据分析的应用融合架构中行为采集网关分析器处理队列数据的流程图；图5示意性示出了适于用来实现本专利技术示例性实施例的计算机设备的计算机系统本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向大数据分析的应用融合架构，其特征在于，包括融合门户平台、能力开放平台和数据治理平台；所述融合门户平台用于支持统一用户管理、统一应用管理、统一认证、统一授权以及单点登录，所述融合门户平台包含行为采集网关，所述行为采集网关用于处理融合门户平台内置应用客户端和服务端交互的所有HTTP请求和响应；所述能力开放平台用于提供统一数据共享交换服务、统一消息服务、统一物联服务以及统一AI服务；所述数据治理平台用于提供数据采集汇聚、数据标准化、主数据管理、元数据管理以及数据质量管理。2.根据权利要求1所述的应用融合架构，其特征在于，所述融合门户平台的形态包括PC端和移动端，所述融合门户平台还用于供用户访问应用客户端，所述应用客户端通过HTTP协议访问应用服务端。3.根据权利要求2所述的应用融合架构，其特征在于，所述能力开放平台还用于通过HTTP协议的API提供统一数据共享交换服务、统一消息服务、统一物联服务以及统一AI服务。4.根据权利要求3所述的应用融合架构，其特征在于，所述能力开放平台包含行为注册单元和行为采集网关，所述行为注册单元用于接受各应用的行为注册，所述行为采集网关用于处理所有应用访问能力开发平台应用的HTTP请求和响应。5.根据权利要求2所述的应用融合架构，其特征在于，所述融合门户平台的行为采集网关通过HTTP协议访问应用库的应用服务端，所述应用库内包含应用数据库。6.根据权利要求5所述的应用融合架构，其特征在于，所述融合门户平台的行为采集网关以及所述能力开放平台的行为采集网关内均设有行为日志数据库。7.根据权利要求6所述的应用融合架构，其特征在于，所述数据治理平台还用于同时从应用数据库和行为日志数据库采集数据，数据治理后分类形成包含行为数据在内的主题库，所述主题库包括业务数据主题库和行为主题库。8.根据权利要求4所述的应用融合架构，其特征在于，所述行为注册单元还用于通过定义行为的HT...

【专利技术属性】
技术研发人员：胡琦，严鹤，王俊，李舵文，范爱心，杨苏，
申请(专利权)人：云启智慧科技有限公司，
类型：发明
国别省市：