一种直播效果监控处理方法及系统技术方案

本发明专利技术公开了一种直播效果监控处理方法及系统，属于直播视频技术领域，包括对直播内容进行录制缓存，从缓存录像中计算出直播历史关键帧图像，再对历史关键帧图像进行检测，采用亮度异常检测、偏色检测、图像噪声检测、条纹噪声检测、清晰度检测、信号丢失检测、画面冻结检测和画面滚动及抖动检测等多种检测方式对历史关键帧图像进行全方面检测，最后根据检测结果进行结合判断，判断当前直播内容是否符合直播标准，本发明专利技术能对直播视频进行多角度检测，使得检测结果全面且实用，提高检测结果的可靠性，从数据角度直观的体现直播流的质量，便于工作人员对用户观看直播视频的质量情况进行了解。进行了解。进行了解。

【技术实现步骤摘要】
一种直播效果监控处理方法及系统


[0001]本专利技术属于直播视频
，具体地说，涉及一种直播效果监控处理方法及系统。

技术介绍

[0002]目前，随着网络通信技术的进步和宽带网络的提速，网络直播得到了越来越多的发展和应用，在直播领域，越来越多的观众会观看主播的直播，对于主播会使用直播软件来采集摄像头的内容以及电脑内容进行直播。
[0003]随着直播的逐渐发展，直播涉及的内容越来越广泛，观看直播的人越来越多，直播作为一种泛娱乐文化的载体，但是直播画面很容易受网络波动和直播设备影响，导致观众的观看效果下降，使得观众流失，让直播平台的经济收益受损，因此如何及时了解主播的直播情况，发现直播内容是否符合直播标准已成为直播监控系统运行的首要迫切问题。
[0004]现有技术中，网络直播监管员需要24小时人工对视频播放内容进行监控，监管员每人每天需要过目海量的实时直播截图，由于人眼长期识别图片的过程中容易产生视觉疲劳，对于成千上万个直播间，依靠人工去检测监控画面是否有问题是不现实的，因此需要一种可以对直播内容画面进行监控的方法，判断当前直播画面是否符合直播标准。

技术实现思路

[0005]要解决的问题
[0006]针对现有直播画面很容易受网络波动和直播设备影响，导致观众的观看效果下降，使得观众流失，直播监管员人眼长期识别图片的过程中容易产生视觉疲劳，不能对直播内容进行实时监督的问题，本专利技术提供一种直播效果监控处理方法及系统。
[0007]技术方案
[0008]为解决上述问题，本专利技术采用如下的技术方案。
[0009]一种直播效果监控处理方法，采用以下步骤：
[0010]步骤1：对直播内容进行录制缓存，从缓存录像中计算出直播历史关键帧图像；
[0011]步骤2：对历史关键帧图像进行检测，检测内容包括：亮度异常检测、偏色检测、图像噪声检测、条纹噪声检测、清晰度检测、信号丢失检测、画面冻结检测和画面滚动及抖动检测；
[0012]步骤3：根据检测结果进行结合判断，判断当前直播内容是否符合标准。
[0013]优选地，所述亮度异常检测方法如下：把关键帧图像转化为灰度图像，计算灰度化图像的平均灰度值G，预设阈值A和B，当G∈[0,A]，判断图像偏暗，当G∈[B,255]判断图像偏亮。
[0014]优选地，所述偏色检测方法如下：提取关键帧图像的色度分量H，计算色度分量H的直方图，计算直方图最大bin在直方图中的比例，比例值计算结果为偏色值。
[0015]优选地，所述图像噪声检测方法如下：预设四个卷积模板，卷积模板的方向分别为
0
°
、45
°
、90
°
和135
°
，使用四个卷积模板对关键帧图像做卷积计算，计算得到四个卷积绝对值最小值Min，通过卷积绝对值最小值Min检测噪声点，同时计算得到关键帧图像的灰度图gray和值滤波图median，使用灰度图gray和值滤波图median对噪声点进行判断，噪声点占关键帧图像的比例为雪花噪声率。
[0016]优选地，所述条纹噪声检测方法如下：提取关键帧图像的色度分量，根据色度分量计算得到DFT频谱图，计算DFT频谱图中的异常亮点数，若异常亮点数大于预设阈值，则异常亮点数为条纹检测值。
[0017]优选地，所述清晰度检测方法如下：将关键帧图像分割成N*M的区域，求每个区域的对比度，所有对比度的平均值为清晰度的模糊率。
[0018]优选地，所述信号丢失检测方法如下：将关键帧图像二值化，偏黑的部分为前景，其他部分为背景，对前景进行连通区域检测，求得最大连通区域面积，最大连通区域面积在关键帧图像中占的面积比例即为信号丢失率。
[0019]优选地，所述画面冻结检测方法如下：每隔T帧从关键帧图像抽取一帧，获取抽取帧的直方图，计算相邻两帧直方图的相似度，当相似度大于预设阈值时，认为二帧一致，当一致的帧数的数量达到预设数量值时，判断视频出现画面发生冻结。
[0020]优选地，所述画面滚动及抖动检测方法如下：画面滚动是获取云台运动前N帧关键帧图像，进行背景建模，得到运动前背景，发送运动指令至云台，让云台进行运动，改变场景，取云台运动后N帧图像，进行背景建模，得到运动后背景，对比运动前背景和动后背景的颜色直方图相似度，当相似度大于预设数值时，认为云台运动有故障；画面抖动从关键帧图像中每个预设间隔抽取一帧，对取到的每帧图像进行特征点提取，对检测的相邻两帧进行特征点匹配，得到匹配矩阵，当匹配矩阵大于预设值时认为这两帧画面有抖动，当抖动帧数大于预设数量值时认为直播画面发生抖动。
[0021]一种直播效果监控处理系统，包括：
[0022]录制模块，用于录制直播视频内容；
[0023]关键帧模块，用于从视频内容内提取出关键帧图像；
[0024]存储模块，用于缓存录制模块录制的数据，保存关键帧模块提取出的关键帧图像；
[0025]亮度异常模块，用于对关键帧图像的亮度进行异常检测；
[0026]偏色模块，用于计算整体偏色值；
[0027]图像噪声模块，用于计算噪声点在关键帧图像中的比例；
[0028]条纹噪声模块，用于计算关键帧图像中的异常亮点数；
[0029]清晰度模块，用于计算关键帧图像清晰度的模糊率；
[0030]信号丢失模块，用于计算最大连通区域面积在关键帧图像中占的面积比例；
[0031]画面冻结模块，用于计算并判断视频是否出现画面发生冻结；
[0032]画面滚动模块，用于判断视频云台运动有故障；
[0033]画面抖动模块，用于计算抖动帧数量值，判断直播画面是否发生抖动；
[0034]结果判断模块，用于根据检测结果判断当前直播画面是否符合直播标准。
[0035]一种直播效果监控处理方法及系统，通过对直播内容进行录制缓存，从缓存录像中计算出直播历史关键帧图像，再对历史关键帧图像进行检测，采用亮度异常检测、偏色检测、图像噪声检测、条纹噪声检测、清晰度检测、信号丢失检测、画面冻结检测和画面滚动及
抖动检测等多种检测方式对历史关键帧图像进行全方面检测，最后根据检测结果进行结合判断，判断当前直播内容是否符合直播标准，当不符合标准时，对主播发送提示。
[0036]有益效果
[0037]相比于现有技术，本专利技术的有益效果为：
[0038](1)本专利技术通过检测直播视频的质量，计算直播流帧的质量，从而从数据角度直观的体现直播流的质量，便于工作人员对用户观看直播视频的质量情况进行了解；
[0039](2)本专利技术通过亮度异常检测、偏色检测、图像噪声检测、条纹噪声检测、清晰度检测、信号丢失检测、画面冻结检测和画面滚动及抖动检测，对直播视频进行多角度检测，使得检测结果全面且实用，提高检测结果的可靠性；
[0040](3)本专利技术能够保证直播平台的用户量，避免因网络或设备因素造成的不良使用体验，避免客户因本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种直播效果监控处理方法，其特征在于，采用以下步骤：步骤1：对直播内容进行录制缓存，从缓存录像中计算出直播历史关键帧图像；步骤2：对历史关键帧图像进行检测，检测内容包括：亮度异常检测、偏色检测、图像噪声检测、条纹噪声检测、清晰度检测、信号丢失检测、画面冻结检测和画面滚动及抖动检测；步骤3：根据检测结果进行结合判断，判断当前直播内容是否符合标准。2.根据权利要求1所述的一种直播效果监控处理方法，其特征在于：所述亮度异常检测方法如下：把关键帧图像转化为灰度图像，计算灰度化图像的平均灰度值G，预设阈值A和B，当G∈[0,A]，判断图像偏暗，当G∈[B,255]判断图像偏亮。3.根据权利要求2所述的一种直播效果监控处理方法，其特征在于：所述偏色检测方法如下：提取关键帧图像的色度分量H，计算色度分量H的直方图，计算直方图最大bin在直方图中的比例，比例值计算结果为偏色值。4.根据权利要求3所述的一种直播效果监控处理方法，其特征在于：所述图像噪声检测方法如下：预设四个卷积模板，卷积模板的方向分别为0
°
、45
°
、90
°
和135
°
，使用四个卷积模板对关键帧图像做卷积计算，计算得到四个卷积绝对值最小值Min，通过卷积绝对值最小值Min检测噪声点，同时计算得到关键帧图像的灰度图gray和值滤波图median，使用灰度图gray和值滤波图median对噪声点进行判断，噪声点占关键帧图像的比例为雪花噪声率。5.根据权利要求4所述的一种直播效果监控处理方法，其特征在于：所述条纹噪声检测方法如下：提取关键帧图像的色度分量，根据色度分量计算得到DFT频谱图，计算DFT频谱图中的异常亮点数，若异常亮点数大于预设阈值，则异常亮点数为条纹检测值。6.根据权利要求5所述的一种直播效果监控处理方法，其特征在于：所述清晰度检测方法如下：将关键帧图像分割成N*M的区域，求每个区域的对比度，所有对比度的平均值为清晰度的模糊率。7.根据权利要求6所述的一种直播效果监控处理方...

【专利技术属性】
技术研发人员：张征，
申请(专利权)人：广州阿凡提电子科技有限公司，
类型：发明
国别省市：