一种快速视频审核的方法技术

本发明专利技术涉及多媒体信息(图片和视频)、机器视觉、计算视觉领域，具体涉及一种快速视频审核的方法，由系统自动分配参数以完成镜头边界提取或者相似性过滤，再把提取出的边界帧组合成一个短视频，最后审核人员或自动系统审核该短视频即可的快速视频审核的方法，包括步骤一：审核类型输入，把待审核视频的审核类型统一输入到系统预处理系统；步骤二：边界镜头提取和相似帧过滤，步骤三：视频合成，利用开源工具ffmpeg(例如：ffmpeg‑fimage2‑i％d.jpg‑vcodec libx264‑rN test.mp4)命令，生成帧率为N帧/s的视频；步骤四：视频审核输出，将生成的帧率为N帧/s的视频输出便于人工或者系统审核。

【技术实现步骤摘要】
一种快速视频审核的方法
本专利技术涉及多媒体信息(图片和视频)、机器视觉、计算视觉领域，具体涉及一种快速视频审核的方法。
技术介绍
随着多媒体技术和应用越来越广泛，各种各样的视频和音频广泛采集和发布，其内容和种类层出不穷，纷繁杂乱。因此，针对视频的版权、政治、黄色以及暴力等问题的审核越来越重要，视频审核的数量也在不断增加。目前，大部分具有审核资质的公司不管是人工审核还是自动审核，几乎都是1:1审核，这也就意味着审核必须要把视频完整的播放完，耗时耗力。现有技术中，在视频“上架”前，一般都是先将所有的待上传的视频进行转码，然后每个视频审核界面仅为一个转码后的视频进行审核，如此进行逐一的审核。这种方法的弊端在于：如果转码后的视频没有通过审核，则之前的转码工作就无效，造成了资源上的浪费；另外，由于现有技术中视频是逐一进行审核的，审核的进度相对来说比较低。目前，由于视频审核的速度的原因，导致了有些视频不能及时上传至视频网站的问题。因此，如何提高视频的审核效率，成为业界的关注点之一。
技术实现思路
本专利技术的目的在于，提供一种把待审核视频的审核类型统一输入到系统预处理系统，由系统自动分配参数以完成镜头边界提取或者相似性过滤，再把提取出的边界帧组合成一个短视频，最后审核人员或自动系统审核该短视频即可的快速视频审核的方法。专利技术解决其技术问题所采用的技术方案是：一种快速视频审核的方法，包括如下步骤：步骤一：审核类型输入，把待审核视频的审核类型统一输入到系统预处理系统；步骤二：边界镜头提取和相似帧过滤，首先是根据图片不同的特征颜色、纹理和轮廓提取图片特征；再根据提取出的图片特征计算帧间相似性，根据自适应或者自定义阈值，判断图片是否相似，以此精简视频或者提取镜头边界；其中相似帧过滤算法中，颜色特征提取的方法包括颜色直方图、累加颜色直方图、分块主颜色法和颜色集及颜色矩；轮廓特征法通过对轮廓特征的表示来提取图像的形状参数，轮廓特征法包含Hough变换、小波描述符和傅里叶形状描述符；其中帧间相似性计算算法为：互信息的计算公式为：其中，N是图像的灰度级别数，b′i代表第t帧灰度级为i时的像素数量，P代表每个帧的像素个数。据此计算确定帧间相似性，运用以下算法剔除相似帧以精简视频；确定帧间相似性是根据人眼的视觉暂留时间为t秒，因此在1秒内，画面变化不应超过1/t次，设视频的帧率为N帧/秒，则计算帧间相似性di以及N*t进1取整的帧数m的平均帧间相似性，可得到N个平均相似性δn；去除1/t(由t<1得1/t>1)个平均帧间相似性较小的值，则还剩下N-1/t个平均相似性再取其均值δ；根据以下公式剔除相似帧，初步精简视频；其中提取镜头边界，包括利用HSV颜色直方图统计帧间差，然后与自适应阈值对比，得到N个镜头边界；采用HOG特征差分对上述得到N个镜头边界进行二次检测，排除错误的镜头边界；利用HOG差分划分镜头并移除边界距离小于15的镜头边界，得到M个镜头边界；将M个镜头边界更新到上述结果中；步骤三：视频合成，利用开源工具ffmpeg(例如：ffmpeg-fimage2-i％d.jpg-vcodeclibx264-rNtest.mp4)命令，生成帧率为N帧/s的视频；步骤四：视频审核输出，将生成的帧率为N帧/s的视频输出便于人工或者系统审核。本专利技术的有益效果是：本专利技术审核方法效率高，节省人力，节省时间；该方法适用范围广，可根据不同的审核要求自适应提高审核效率；精简相似帧算法充分考虑人眼和视频的双重因素，得到的一种自适应方法，实用、高效。附图说明图1为本专利技术的快速视频审核的方法的步骤示意图。图2为本专利技术的快速视频审核的方法中精简视频的方法示意图。图3为本专利技术的快速视频审核的方法中提取镜头边界的步骤示意图。具体实施方式现在结合附图对专利技术作进一步详细的说明。这些附图均为简化的示意图，仅以示意方式说明专利技术的基本结构，因此其仅显示与专利技术有关的构成。如图所示，一种快速视频审核的方法，包括如下步骤：步骤一：审核类型输入，把待审核视频的审核类型统一输入到系统预处理系统；步骤二：边界镜头提取和相似帧过滤，首先是根据图片不同的特征颜色、纹理和轮廓提取图片特征；再根据提取出的图片特征计算帧间相似性，根据自适应或者自定义阈值，判断图片是否相似，以此精简视频或者提取镜头边界；其中相似帧过滤算法中，颜色特征提取的方法包括颜色直方图、累加颜色直方图、分块主颜色法和颜色集及颜色矩；轮廓特征法通过对轮廓特征的表示来提取图像的形状参数，轮廓特征法包含Hough变换、小波描述符和傅里叶形状描述符；其中帧间相似性计算算法为：互信息的计算公式为：其中，N是图像的灰度级别数，b′i代表第t帧灰度级为i时-的像素数量，P代表每个帧的像素个数。据此计算确定帧间相似性，利用以下算法剔除相似帧以精简视频；确定帧间相似性是根据人眼的视觉暂留时间为t秒，因此在1秒内，画面变化不应超过1/t次，设视频的帧率为N帧/秒，则计算帧间相似性di以及N*t进1取整的帧数m的平均帧间相似性，可得到N个平均相似性δn；去除1/t(由t<1得1/t>1)个平均帧间相似性较小的值，则还剩下N-1/t个平均相似性再取其均值δ；根据以下公式剔除相似帧，初步精简视频；其中提取镜头边界，包括利用HSV颜色直方图统计帧间差，然后与自适应阈值对比，得到N个镜头边界；采用HOG特征差分对上述得到N个镜头边界进行二次检测，排除错误的镜头边界；利用HOG差分划分镜头并移除边界距离小于15的镜头边界，得到M个镜头边界；将M个镜头边界更新到上述结果中；步骤三：视频合成，利用开源工具ffmpeg(例如：ffmpeg-fimage2-i％d.jpg-vcodeclibx264-rNtest.mp4)命令，生成帧率为N帧/s的视频；步骤四：视频审核输出，将生成的帧率为N帧/s的视频输出便于人工或者系统审核。该方法首先把待审核视频的审核类型统一输入到系统预处理系统，由系统自动分配参数以完成镜头边界提取或者相似性过滤，再把提取出的边界帧组合成一个短视频，最后审核人员或自动系统审核该短视频即可。具体方法如图1所示，预处理模块是可根据输入审核类型，自动调节图片特征提取方法和相似性比较参数，为要粗审的视频过滤掉帧间相似性较大的帧，为精审视频提取镜头边界(镜头突变和渐变边界)，达到精简视频的作用。预处理模块算法首先是根据图片不同的特征颜色、纹理、轮廓等提取图片特征；再根据提取出的图片特征计算帧间相似性，根据自适应或者自定义阈值，判断图片是否相似；以此精简视频或者提取镜头边界。提取镜头边界有突变和渐变的判断，算法不做说明，准确性越高的越好。由于审核类型中重点在于图片的颜色和轮廓，比如大片肤色有黄色嫌疑，大片红色有暴力嫌疑等。因此，镜头边界算法可采取颜色和轮廓特征提取的协同相关算法来实现。颜色特征提取的方法主要有颜色直方图、累加颜色直方图、分块主颜色法、颜色集及颜色矩等。轮廓特征法通过对轮廓特征的表示来提取图像的形状参数。轮廓特征法包含Hough变换、小波描述符和傅里叶形状描述符等方法。帧间相似性计算算法为：互信息的计算公式为：其中，N是图像的灰度级别数，b′i代表第t帧灰度级为i时的像素数量，P代本文档来自技高网...

【技术保护点】
一种快速视频审核的方法，其特征在于：包括如下步骤：步骤一：审核类型输入，把待审核视频的审核类型统一输入到系统预处理系统；步骤二：边界镜头提取和相似帧过滤，首先是根据图片不同的特征颜色、纹理和轮廓提取图片特征；再根据提取出的图片特征计算帧间相似性，根据自适应或者自定义阈值，判断图片是否相似，以此精简视频或者提取镜头边界；其中相似帧过滤算法中，颜色特征提取的方法包括颜色直方图、累加颜色直方图、分块主颜色法和颜色集及颜色矩；轮廓特征法通过对轮廓特征的表示来提取图像的形状参数，轮廓特征法包含Hough变换、小波描述符和傅里叶形状描述符；其中帧间相似性计算算法为：互信息的计算公式为：

【技术特征摘要】
1.一种快速视频审核的方法，其特征在于：包括如下步骤：步骤一：审核类型输入，把待审核视频的审核类型统一输入到系统预处理系统；步骤二：边界镜头提取和相似帧过滤，首先是根据图片不同的特征颜色、纹理和轮廓提取图片特征；再根据提取出的图片特征计算帧间相似性，根据自适应或者自定义阈值，判断图片是否相似，以此精简视频或者提取镜头边界；其中相似帧过滤算法中，颜色特征提取的方法包括颜色直方图、累加颜色直方图、分块主颜色法和颜色集及颜色矩；轮廓特征法通过对轮廓特征的表示来提取图像的形状参数，轮廓特征法包含Hough变换、小波描述符和傅里叶形状描述符；其中帧间相似性计算算法为：互信息的计算公式为：其中，N是图像的灰度级别数，代表第t帧灰度级为i时的像素数量，P代表每个帧的像素个数。据此计算确定帧间相似性，运用以下算法剔除相似帧以精简视频；确定帧间相似性是根据人眼的视觉暂留时间为t秒，因此在1秒内，画面变化不...

【专利技术属性】
技术研发人员：孙伟芳，
申请(专利权)人：央视国际网络无锡有限公司，
类型：发明
国别省市：江苏,32