一种基于Flink的可视化作业生成解决方法技术

技术编号:35568411 阅读:21 留言:0更新日期:2022-11-12 15:52
本发明专利技术公开了一种基于F l i nk的可视化作业生成解决方法,具体涉及大数据领域。本发明专利技术可直观的开发并展示数据处理流程;采用了画布的处理模式,可以更灵活的生成数据处理作业;它主要包括了参数的属性,组件,组件实现工厂和可视化作业画布四部分;其中组件作为整套方案的核心部分,包含了组件信息,参数的属性列表等配置;前端会根据组件信息判定组件的连线规则,并根据参数的属性列表,初始化组件卡片内的参数样式。组件对应的数据处理逻辑,在组件的实现工厂中完成。组件的实现工厂中完成。组件的实现工厂中完成。

【技术实现步骤摘要】
一种基于Flink的可视化作业生成解决方法


[0001]本专利技术涉及大数据
,更具体地说,本专利技术涉及一种基于Flink的可视化作业生成解决方法。

技术介绍

[0002]随着大数据的发展,数据仓库的建设已经作为大中型企业的必经之路。
[0003]数据仓库(Data Warehouse)是伴随着企业信息化发展起来的,在企业信息化的过程中,随着信息化工具的升级和新工具的应用,数据量变得越来越大,数据格式越来越多,决策要求越来越苛刻。出于企业的分析性报告和决策支持目的而创建数仓(数仓:存放数据的仓库,它集合了各个业务系统的数据。从逻辑上理解,数据库和数仓没有区别,都是通过数据库软件实现存放数据的地方,只不过从数据量来说,数据仓库要比数据库更庞大。他们最主要的区别在于,传统事务型数据库如MySQL用于做联机事务处理(OLTP),例如交易事件的发生等;而数据仓库主要用于联机分析处理(OLAP),例如出报表等),对多样的业务数据进行筛选与整合。数据仓库通过从不同来源收集和管理数据,最终的输出用于企业的数据分析、数据挖掘、数据报表等方向。它本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于Flink的可视化作业生成解决方法,其特征在于:包括参数的属性、组件、组件实现工厂和可视化作业画布四部分,设计了一套以组件为核心的可视化作业生成解决方案;组件包含了组件信息和参数的属性列表信息;组件对应的组件信息中,包含且不仅限于当前组件在页面上的具体展现形式、展现位置、组件类型和数据类型;组件类型有环境类组件和操作类组件两种;组件信息中的组件类型,设置了组件的连线规则;组件对应的参数的属性列表中,包含了组件卡片内的参数样式,前端根据参数的属性列表进行初始化,会生成对应的表单;组件对应的具体实现,在其对应的组件实现工厂完...

【专利技术属性】
技术研发人员:苗洪志林泓沂彭湘豫谢作樟王淳
申请(专利权)人:浙江网安信创电子技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1