一种基于云分布式海量交通视频信息处理方法技术

技术编号:20050196 阅读:51 留言:0更新日期:2019-01-09 05:56
本发明专利技术公开了一种基于云分布式海量交通视频信息处理方法,将原视频文件解压为固定大小的视频帧图像;将解压后的单帧图像按照固定帧数来压缩成小的视频文件;对重新压缩得到的所有视频文件按照数据量大小进行排序,两两进行合并,待合并的两个视频文件分别取自最大的视频文件和最小的视频文件;使用Xuggler来对分布式文件系统上的交通视频文件进行编解码操作。本发明专利技术的有益效果是能提高处理海量交通视频信息的效率。

【技术实现步骤摘要】
一种基于云分布式海量交通视频信息处理方法
本专利技术属于数据处理
,涉及一种基于云分布式海量交通视频信息处理方法。
技术介绍
目前海量交通视频文件的分布式存储鉴于视频文件的结构特性以及Hadoop分布式文件系统(HDFS)的分块存储策略,但是如何存储海量交通视频文件有三个问题:1)块利用率不高:由于交通视频文件大小不固定,很难保证每个视频文件大小都是HDFS数据块的整数倍,从而在最后一块的时候仅仅剩下几十MB甚至几MB,浪费HDFS的存储资源。2)视频的帧间关系可能被打破:由于交通视频文件由若干GOP组成,而且每个GOP由一个I帧,若干个B帧和若干个P帧组成,当HDFS对交通视频文件进行分块存储的时候会把某一个GOP切断,使得无法正常读取交通视频文件。3)视频头信息的存储:对于分块存储的交通视频文件,只有第一块含有头文件,后续的数据块都因为没有头信息而无法正常读取。目前基于海量交通视频文件的分布式存储设计基于Hadoop读取接口InputFormat的海量交通视频信息的分布式并行处理,分布式并行处理主要涉及分布式文件系统中的交通视频文件解码、Key/Value对的解析以及数据传本文档来自技高网...

【技术保护点】
1.一种基于云分布式海量交通视频信息处理方法,其特征在于按照以下步骤进行:1)将原视频文件解压为固定大小的视频帧图像;2)将解压后的单帧图像按照固定帧数来压缩成小的视频文件;3)对重新压缩得到的所有视频文件按照数据量大小进行排序,两两进行合并,待合并的两个视频文件分别取自最大的视频文件和最小的视频文件;4)使用Xuggler来对分布式文件系统上的交通视频文件进行编解码操作。

【技术特征摘要】
1.一种基于云分布式海量交通视频信息处理方法,其特征在于按照以下步骤进行:1)将原视频文件解压为固定大小的视频帧图像;2)将解压后的单帧图像按照固定帧数来压缩成小的视频文件;3)对重新压缩得到的所有视频文件按照数据量大小进行排序,两两进行合并,待合并的两个视频文件分别取自最大的视频文件和最小的视频文件;4)使用Xuggler来对分布式文件系统上的交通视频文件进行编解码操作。2.按照权利要求1所述一种基于云分布式海量交通视频信息处理方法,其特征在于:所述步骤1)利用OpenCV库读取原始视频文件来...

【专利技术属性】
技术研发人员:秦勃刘宝利曲佳博
申请(专利权)人:中国海洋大学
类型:发明
国别省市:山东,37

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1