一种基于物联网的大数据采集与处理方法及系统技术方案

技术编号:42607738 阅读:25 留言:0更新日期:2024-09-03 18:16
本发明专利技术提供一种基于物联网的大数据采集与处理方法及系统,涉及数据处理领域,该系统包括:数据采集模块,包括多个物联网采集单元,用于采集物联网数据;数据处理模块,包括多个数据处理单元,用于处理至少一个的物联网采集单元采集的物联网数据,还用于确定物联网采集单元对应的实时计算资源需求;异常监测模块,包括多个异常监测单元,用于接收至少一个数据处理单元上传的心跳数据包,确定数据处理单元的实时状态;动态调控模块,用于基于每个物联网采集单元对应的实时计算资源需求和每个数据处理单元的实时状态,确定第一资源分配策略,基于数据处理单元的实时状态,确定第二资源分配策略,具有提高基于物联网的大数据采集与处理的效率的优点。

【技术实现步骤摘要】

本专利技术涉及数据处理领域,特别涉及一种基于物联网的大数据采集与处理方法及系统


技术介绍

1、物联网是新一代信息技术的重要组成部分,也是“信息化”时代的重要发展阶段。其英文名称是:“internet of things(iot)”。顾名思义,物联网就是物物相连的互联网。这有两层意思:其一,物联网的核心和基础仍然是互联网,是在互联网基础上的延伸和扩展的网络;其二,其用户端延伸和扩展到了任何物品与物品之间,进行信息交换和通信,也就是物物相息。物联网通过智能感知、识别技术与普适计算等通信感知技术,广泛应用于网络的融合中,也因此被称为继计算机、互联网之后世界信息产业发展的第三次浪潮。物联网是互联网的应用拓展。大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

2、物联网将生活中的人与物联网联系起来,产生了大量的数据,虽然目前物联网给我们提供了具体的解决措施:云计算技术、分布式技术,已经成为物联网时代的一项基本本文档来自技高网...

【技术保护点】

1.一种基于物联网的大数据采集与处理系统,其特征在于,包括:

2.根据权利要求1所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述心跳数据包包括实时CPU使用率、实时内存占用率及实时网络流量;

3.根据权利要求2所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述异常监测模块基于所述当前时间段包括的多个连续当前时间点的心跳数据包,确定所述当前时间段对应的心跳特征参数,包括:

4.根据权利要求3所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述动态调控模块还用于:

5.根据权利要求4所述的一种基于物联网的大数据采集...

【技术特征摘要】

1.一种基于物联网的大数据采集与处理系统,其特征在于,包括:

2.根据权利要求1所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述心跳数据包包括实时cpu使用率、实时内存占用率及实时网络流量;

3.根据权利要求2所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述异常监测模块基于所述当前时间段包括的多个连续当前时间点的心跳数据包,确定所述当前时间段对应的心跳特征参数,包括:

4.根据权利要求3所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述动态调控模块还用于:

5.根据权利要求4所述的一种基于物联网的大数据采集与处理系统,其特征在于,所述异常监测模块基于所述多个数据处理单元簇和所述数据处理单元对应每个所述当前时间段对应的心跳特征参数,确定所述数据处理单元的实时状态,包括:<...

【专利技术属性】
技术研发人员:李展宏
申请(专利权)人:探保网络科技广州有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1