一种弹性伸缩的多源数据集成与分析平台制造技术

技术编号:40749273 阅读:37 留言:0更新日期:2024-03-25 20:05
本发明专利技术公开了一种弹性伸缩的多源数据集成与分析平台,涉及计算机网络服务技术领域,具体为一种弹性伸缩的多源数据集成与分析平台,包括多源数据集成平台的主要组件和多源异构平台的主要功能;所述多源数据集成平台的主要功能组件包括ETL数据集成组件、DataStream实时数据传输和DataX数据可视化大屏,所述多源异构平台的主要功能包括存储服务、数据服务、检索服务、可视化服务和资源目录服务。本发明专利技术MRS提供的弹性伸缩能力,可以在突发大数据分析时,及时补充计算节点,避免因为计算能力不足,导致业务宕机,用户无需手动购买创建额外资源,当突发事件结束后,MRS会自动判断缩容时机,自动完成缩容。

【技术实现步骤摘要】

本专利技术涉及计算机网络服务,具体为一种弹性伸缩的多源数据集成与分析平台


技术介绍

1、计算机网络服务通过资源共享:资源包括硬件、软件和数据。硬件为各种处理器、存储设备和输入、输出设备等,可以通过计算机网络实现这代硬件的共享,通过共享使资源发挥最大的作用,同时节省成本,提高效率,数据传输:这里的数据指的是数字、文字、声音、图像和视频信号等媒体存储信息的计算机表示。数据传输是计算机网络齐种功能的基础,有了数据传输,才会有资源共享,才会有其他的各种功能,负载均衡:在有多台计算机的环境中,这些计算机需要处理的任务可能不同,经常有忙闲不均的现象,可以把庞大的科学计算或价息处理题目交给几台联网的计算机协调配合来完成,提供服务:有了计算机网络,才有了现在风靡全球的电子邮件、网上电话、网络会议和电子商务等,它们给人们的生话、学习和娱乐带来了极大的方便,有了网络,使得实时控制系统有了备用和安全保证,使得军事设施在遭到敌方打击时指挥系统保持畅通通无阻。

2、本专利技术涉及计算机网络服务
,具体为一种以pipe为通信基础的数据挖掘分析平台(cn110704本文档来自技高网...

【技术保护点】

1.一种弹性伸缩的多源数据集成与分析平台,其特征在于:包括多源数据集成平台的主要组件和多源异构平台的主要功能;所述多源数据集成平台的主要功能组件包括ETL数据集成组件、DataStream实时数据传输和DataX数据可视化大屏,所述多源异构平台的主要功能包括存储服务、数据服务、检索服务、可视化服务和资源目录服务,多源数据集成平台主要组件通过MRS服务支持规则和时间计划两种弹性伸缩。

2.根据权利要求1所述的一种弹性伸缩的多源数据集成与分析平台,其特征在于:所述ETL数据集成组件中包括有:

3.根据权利要求1所述的一种弹性伸缩的多源数据集成与分析平台,其特征在于:所...

【技术特征摘要】

1.一种弹性伸缩的多源数据集成与分析平台,其特征在于:包括多源数据集成平台的主要组件和多源异构平台的主要功能;所述多源数据集成平台的主要功能组件包括etl数据集成组件、datastream实时数据传输和datax数据可视化大屏,所述多源异构平台的主要功能包括存储服务、数据服务、检索服务、可视化服务和资源目录服务,多源数据集成平台主要组件通过mrs服务支持规则和时间计划两种弹性伸缩。

2.根据权利要求1所述的一种弹性伸缩的多源数据集成与分析平台,其特征在于:所述etl数据集成组件中包括有:

3.根据权利要求1所述的一种弹性伸缩的多源数据集成与分析平台,其特征在于:所述datastream实时数据传输包括有:

4.根据权利要求1所述的一种弹性伸缩的多源数据集成与分析平台,其特征在于:所述datax数据可视化大屏通过数据运算和分析后可一键发布...

【专利技术属性】
技术研发人员:韩伟张天松易夕冬李碧妍肖连菊冯康高宝军黄展鹏何烈军刘文佳
申请(专利权)人:廊坊市讯云数据科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1