视频流数据处理系统及方法技术方案

技术编号:43783915 阅读:26 留言:0更新日期:2024-12-24 16:18
本发明专利技术提供了一种视频流数据处理系统及方法,涉及边缘计算、云计算、流式计算技术领域。视频流数据处理系统包括:基础设施层,用于构建和管理边缘计算节点,所述边缘计算节点上部署有轻量化的容器集群;流计算引擎层,用于根据待处理任务,调用所述边缘计算节点上的容器集群以并行处理视频流数据;任务协同处理层,用于根据所述边缘计算节点在处理所述视频流数据时的资源利用率,调整所述待处理任务在所述容器集群上的分配。

【技术实现步骤摘要】

本专利技术涉及边缘计算、云计算、流式计算等,具体涉及一种视频流数据处理系统及方法


技术介绍

1、在当今数字化时代,视频流应用场景的重要性日益突显。以遥感数据视频流为例,随着航空航天领域的快速发展,遥感卫星数量愈来愈多,无人机遥感技术也蓬勃发展,海量的遥感图像视频流正源源不断地产生。在资源、气象、海洋、环境、国防等方面具有广泛的应用场景。这些视频流应用场景通常对数据处理实时性要求高,现有的视频流处理方式,其计算和存储资源分散,难以应对实时数据处理的挑战,因而阻碍了其发展。


技术实现思路

1、有鉴于此,本专利技术提供了一种视频流数据处理系统及方法,以至少部分地解决上述问题。

2、本专利技术一方面提供一种视频流数据处理系统,包括:基础设施层,用于构建和管理边缘计算节点,边缘计算节点上部署有轻量化的容器集群;流计算引擎层,用于根据待处理任务,调用边缘计算节点上的容器集群以并行处理视频流数据;任务协同处理层,用于根据边缘计算节点在处理视频流数据时的资源利用率,调整待处理任务在容器集群上的分配。

...

【技术保护点】

1.一种视频流数据处理系统,其特征在于,包括:

2.根据权利要求1所述的视频流数据处理系统,其特征在于,所述边缘计算节点通过轻量化容器编排工具部署和管理所述容器集群,其中,所述轻量化容器编排工具采用轻量化数据库进行所述容器集群的数据存储,并通过二进制文件启动所述容器集群。

3.根据权利要求1或2所述的视频流数据处理系统,其特征在于,所述流计算引擎层包括流式计算组件和流式计算框架,其中,所述流式计算框架用于接收所述待处理任务,并通过与所述流式计算组件集成,调用所述容器集群以并行处理所述视频流数据。

4.根据权利要求3所述的视频流数据处理系统,其特征在于,...

【技术特征摘要】

1.一种视频流数据处理系统,其特征在于,包括:

2.根据权利要求1所述的视频流数据处理系统,其特征在于,所述边缘计算节点通过轻量化容器编排工具部署和管理所述容器集群,其中,所述轻量化容器编排工具采用轻量化数据库进行所述容器集群的数据存储,并通过二进制文件启动所述容器集群。

3.根据权利要求1或2所述的视频流数据处理系统,其特征在于,所述流计算引擎层包括流式计算组件和流式计算框架,其中,所述流式计算框架用于接收所述待处理任务,并通过与所述流式计算组件集成,调用所述容器集群以并行处理所述视频流数据。

4.根据权利要求3所述的视频流数据处理系统,其特征在于,所述流式计算框架包括作业管理器和至少两个并行的任务管理器,所述作业管理器用于对所述待处理任务进行调度和分配,所述任务管理器用于接收和执行所述作业管理器分配的所述待处理任务,并在执行所述待处理任务时与其他至少一个任务管理器之间进行数据交换。

5.根据权利要求1所述的视频流数据处理系统,其特征在于,所述任务协同处理层包括资源感知组件,其中,所述资源...

【专利技术属性】
技术研发人员:孙小涓桑冠南高斌胡玉新姜芸珂牟文浩孙国庆
申请(专利权)人:中国科学院空天信息创新研究院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1