基于感兴趣目标显著性检测的视频传输方法和装置制造方法及图纸

本发明专利技术公开了一种基于感兴趣目标显著性检测的视频传输方法和装置，所述方法包括：对视频图像基于分层显著性检测算法进行显著性检测；基于检测出的显著性目标确定感兴趣区域；基于确定的感兴趣区域进行图像数据的传输。应用本发明专利技术可以减少视频传输数据量，减少视频数据的传输延时，从而避免网络拥塞。

Method and device of video transmission based on significance detection of interested objects

【技术实现步骤摘要】
基于感兴趣目标显著性检测的视频传输方法和装置
本专利技术涉及视频传输领域，特别是指一种基于感兴趣目标显著性检测的视频传输方法和装置。
技术介绍
随着互联网的日益发展，视频业务逐渐成为互联网应用中占据主导地位的业务形态，视频数据组成了互联网数据的绝大部分。网络视频监控系统作为视频业务之一，由视频监控前端、视频监控平台和客户端组成。视频监控前端收集视频发送给监控平台，再由监控平台发送视频流给客户端。目前，视频监控领域的智能分析主要集中在客户端，即将视频流传输到客户端后由客户端对数据进行智能分析，在视频流的传输上，主要通过对视频数据压缩、转码以减少其传输数据量，减少视频数据的传输延时，从而避免网络拥塞。然而，随着网络数据的不断增长和视频质量的日益提高，尤其是高清设备的应用对视频数据的实时传输和应用端的数据处理造成了巨大的压力。
技术实现思路
本专利技术提出了一种基于感兴趣目标显著性检测的视频传输方法和装置，可以减少视频传输数据量，减少视频数据的传输延时，从而避免网络拥塞。基于上述目的，本专利技术提供一种基于感兴趣目标显著性检测的视频传输方法，包括：对视频图像基于分层显著性检测算法进行显著性检测；基于检测出的显著性目标确定感兴趣区域；基于确定的感兴趣区域进行图像数据的传输。较佳地，在所述对视频图像基于分层显著性检测算法进行显著性检测之前，还包括：对左、右摄像机拍摄的视频图像进行立体匹配，获取视差图像；以及所述对视频图像基于分层显著性检测算法进行显著性检测，具体为：对左摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测；或者对右摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测。较佳地，在所述基于确定的感兴趣区域进行图像数据的传输之前，还包括：针对所述感兴趣区域的每个像素，如果该像素在所述视差图像中的视差值在设定视差范围内，就对该像素在灰度值上进行平滑滤波，弱化其细节；否则，就对该像素在灰度值上进行锐化滤波，强化其细节。其中，所述基于检测出的显著性目标确定感兴趣区域，具体包括：提取所述显著性目标的闭合轮廓；将所述闭合轮廓的外接包围矩形框内的区域确定为所述感兴趣区域。其中，所述基于确定的感兴趣区域进行图像数据的传输，具体包括：对所述视频图像进行编码时，压缩所述感兴趣区域之外的其它区域的码率；根据所述视频图像的编码结果进行图像数据的传输。本专利技术还提供一种基于感兴趣目标显著性检测的视频传输装置，包括：显著性检测模块，用于对视频图像基于分层显著性检测算法进行显著性检测；感兴趣区域确定模块，用于基于检测出的显著性目标确定感兴趣区域；数据传输模块，用于基于确定的感兴趣区域进行图像数据的传输。较佳地，所述装置还包括：视差图像获取模块，用于对左、右摄像机拍摄的视频图像进行立体匹配，获取视差图像；以及所述显著性检测模块具体用于对左摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测；或者，用于对右摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测。较佳地，所述装置还包括：显著性增强模块，用于针对所述感兴趣区域的每个像素，如果该像素在所述视差图像中的视差值在设定视差范围内，就对该像素在灰度值上进行平滑滤波，弱化其细节；否则，就对该像素在灰度值上进行锐化滤波，强化其细节。本专利技术的技术方案中，对待传输的视频图像基于分层显著性检测算法进行显著性检测，并基于检测出的显著性目标确定感兴趣区域；之后，基于确定的感兴趣区域进行图像数据的传输。由于在进行视频数据传输之前先进行显著性检测，基于显著性目标确定感兴趣区域后，基于感兴趣区域的图像数据传输，大大减少了很多冗余的画面数据以及含信息量很少的背景画面数据的传输，从而减少了视频传输数据量，减少视频数据的传输延时，避免了网络拥塞。更优地，本专利技术技术方案中，采用分层显著性检测算法进行显著性目标检测，能够均匀突出显著区域，计算速度较快，并且显著区域的亮度与背景的亮度差异较大，有利于二值化过程，最终得到的显著性目标的图效果较好，但对边缘的处理不够细致，导致显著性目标的图显著区域边缘有少量噪点，因此，本专利技术技术方案中，进而采用形态学运算处理二值化的显著性目标的图，以消除噪声和不连续区域的影响，从而得到显著性目标的更为清晰的边缘轮廓。更优地，本专利技术技术方案中，根据视差图像对感兴趣区域中的像素不论是进行平滑滤波还是锐化滤波，一方面，都可以在一定程度上消除图像中的噪声；另一方面，平滑滤波能够弱化或消除图像中的细节、突变，平滑边缘等，从而达到图像模糊的效果；而锐化滤波可以增强图像中的细节，突出轮廓等，达到图像细节增强的效果，通过对不同视差范围内的像素灰度值实行不同的图像滤波操作，达到图像显著性目标增强的效果。附图说明图1为本专利技术实施例提供的一种基于感兴趣目标显著性检测的视频传输方法流程图；图2a、2b为本专利技术实施例提供的左、右摄像机拍摄的视频图像的示意图；图2c为本专利技术实施例提供的左、右摄像机的视频图像的视差图像的示意图；图3为本专利技术实施例提供的对左、右摄像机拍摄的视频图像进行立体匹配的方法流程图；图4a为本专利技术实施例提供的待进行分层显著性检测的视频图像的示意图；图4b为本专利技术实施例提供的进行分层显著性检测得到的三个尺度的图层；图4c为本专利技术实施例提供的获取的每个图层的显著图示意图；图4d为本专利技术实施例提供的各图层区域块之间的树形关系示意图；图4e为本专利技术实施例提供的重新分层推理各层显著图得到最终显著图的示意图；图5a为本专利技术实施例提供的根据显著性检测得到的显著性目标的图像；图5b为本专利技术实施例提供的对显著性目标的图像进行二值化后得到的图像；图5c为本专利技术实施例提供的经过先腐蚀后膨胀开运算后得到的图像；图6为本专利技术实施例提供的平滑滤波或锐化滤波的方法流程图；图7为本专利技术实施例提供的基于感兴趣目标显著性检测的视频传输装置内部结构框图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本专利技术进一步详细说明。下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本专利技术，而不能解释为对本专利技术的限制。本
技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。需本文档来自技高网...

【技术保护点】
1.一种基于感兴趣目标显著性检测的视频传输方法，其特征在于，包括：/n对视频图像基于分层显著性检测算法进行显著性检测；/n基于检测出的显著性目标确定感兴趣区域；/n基于确定的感兴趣区域进行图像数据的传输。/n

【技术特征摘要】
1.一种基于感兴趣目标显著性检测的视频传输方法，其特征在于，包括：
对视频图像基于分层显著性检测算法进行显著性检测；
基于检测出的显著性目标确定感兴趣区域；
基于确定的感兴趣区域进行图像数据的传输。


2.根据权利要求1所述的方法，其特征在于，在所述对视频图像基于分层显著性检测算法进行显著性检测之前，还包括：
对左、右摄像机拍摄的视频图像进行立体匹配，获取视差图像；以及
所述对视频图像基于分层显著性检测算法进行显著性检测，具体为：
对左摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测；或者
对右摄像机拍摄的视频图像基于分层显著性检测算法进行显著性检测。


3.根据权利要求2所述的方法，其特征在于，在所述基于确定的感兴趣区域进行图像数据的传输之前，还包括：
针对所述感兴趣区域的每个像素，如果该像素在所述视差图像中的视差值在设定视差范围内，就对该像素在灰度值上进行平滑滤波，弱化其细节；否则，就对该像素在灰度值上进行锐化滤波，强化其细节。


4.根据权利要求1-3任一所述的方法，其特征在于，所述基于检测出的显著性目标确定感兴趣区域，具体包括：
提取所述显著性目标的闭合轮廓；
将所述闭合轮廓的外接包围矩形框内的区域确定为所述感兴趣区域。


5.根据权利要求1-3任一所述的方法，其特征在于，所述基于确定的感兴趣区域进行图像数据的传输，具体包括：
对所述视频图像进行编码时，压缩所述感兴趣区域之外的其它区域的码率；
...

【专利技术属性】
技术研发人员：王景鑫，何新宇，范晓松，徐辉，刘浩，钟武军，毛炜，泽正，刘东超，王甘霖，王建强，
申请(专利权)人：华北石油通信有限公司，北京华通信联科技有限公司，
类型：发明
国别省市：河北;13