一种视频卡顿识别方法、装置及终端设备制造方法及图纸

技术编号:24685562 阅读:20 留言:0更新日期:2020-06-27 08:32
本申请提供了一种视频卡顿识别方法、装置及终端设备,适用于视频处理技术领域,该方法包括:当视频监控状态为第一状态且视频中存在人脸时,将监控状态修改为第二状态;若为第二状态,对视频采样得到N张第一帧图像;若N张第一帧图像之间的图像差异度小于第一差异阈值,将最早的采样时刻作为卡顿起始时刻,并将监控状态设置为第三状态;若监控状态为第三状态,对视频采样得到M张第二帧图像;若M张第二帧图像之间的图像差异度大于或等于第一差异阈值,将最晚的采样时刻作为视频的卡顿终止时刻,将监控状态设置为第一状态,并识别视频的卡顿时间段。本申请实施例实现了对卡顿开始和结束的精确识别,从而实现了对卡顿时间段的精确识别。

A method, device and terminal equipment of video card recognition

【技术实现步骤摘要】
一种视频卡顿识别方法、装置及终端设备
本申请属于视频处理
,尤其涉及视频卡顿识别方法及终端设备。
技术介绍
随着技术的不断进步,通过网络进行视频通话(以下简称通话)已经成为了生活和工作中常见的一幕场景,由于实时通话的效果会受到实时网络状态、视频设备状态和视频服务器资源等的影响,其中只要任意一环出现问题都有可能导致通话过程中出现视频卡顿。为了改善卡顿的情况,首先需要确定出通话过程中具体何时出现了卡顿,再对卡顿时的各环节情况进行分析进而定位出卡顿原因,以精确改善视频卡顿情况。现有技术中都是由测试人员手动对通话录制的视频文件进行查阅,并确定出其中存在卡顿的时段,然而这样识别的效率极为低下。
技术实现思路
有鉴于此,本申请实施例提供了一种视频卡顿识别方法及终端设备,可以解决对视频通话卡顿识别效率低下的问题。本申请实施例的第一方面提供了一种视频卡顿识别方法,包括:当实时通话过程中的视频对应的监控状态为第一状态时,对所述视频进行人脸检测,并在检测到所述视频中存在人脸时,将所述视频对应的监控状态修改为本文档来自技高网...

【技术保护点】
1.一种视频卡顿识别方法,其特征在于,包括:/n当实时通话过程中的视频对应的监控状态为第一状态时,对所述视频进行人脸检测,并在检测到所述视频中存在人脸时,将所述视频对应的监控状态修改为第二状态;/n若所述监控状态为第二状态,以第一频率对所述视频进行采样得到N张第一帧图像,并对N张所述第一帧图像进行比对,其中,N为大于1的正整数;/n若比对结果为N张所述第一帧图像之间的图像差异度小于第一差异阈值,将各张所述第一帧图像对应的采样时刻中最早的采样时刻,作为所述视频的卡顿起始时刻,并将所述监控状态设置为第三状态;/n若所述监控状态为第三状态,以第二频率对所述视频进行采样得到M张第二帧图像,并对M张所述...

【技术特征摘要】
1.一种视频卡顿识别方法,其特征在于,包括:
当实时通话过程中的视频对应的监控状态为第一状态时,对所述视频进行人脸检测,并在检测到所述视频中存在人脸时,将所述视频对应的监控状态修改为第二状态;
若所述监控状态为第二状态,以第一频率对所述视频进行采样得到N张第一帧图像,并对N张所述第一帧图像进行比对,其中,N为大于1的正整数;
若比对结果为N张所述第一帧图像之间的图像差异度小于第一差异阈值,将各张所述第一帧图像对应的采样时刻中最早的采样时刻,作为所述视频的卡顿起始时刻,并将所述监控状态设置为第三状态;
若所述监控状态为第三状态,以第二频率对所述视频进行采样得到M张第二帧图像,并对M张所述第二帧图像进行比对,其中,M为大于1的正整数;
若比对结果为M张所述第二帧图像之间的图像差异度大于或等于所述第一差异阈值,将各张所述第二帧图像对应的采样时刻中最晚的采样时刻,作为所述视频的卡顿终止时刻,将所述监控状态设置为第一状态,并基于所述卡顿起始时刻和所述卡顿终止时刻识别所述视频的卡顿时间段。


2.如权利要求1所述的视频卡顿识别方法,其特征在于,所述对N张所述第一帧图像进行比对,包括:
针对每张所述第一帧图像进行人脸器官坐标分析,得到N个第一人脸器官坐标集;
利用N个所述第一人脸器官坐标集对N个所述第一帧图像进行比对。


3.如权利要求2所述的视频卡顿识别方法,其特征在于,所述第一人脸器官坐标集为多个坐标组的集合,每个坐标组对应一种人脸器官,且每个坐标组中包含对应的人脸器官的多个坐标;
所述针对每张所述第一帧图像进行人脸器官坐标分析,包括:
将待分析的所述第一帧图像作为目标图像,对所述目标图像进行人脸轮廓绘制,得到对应的人脸轮廓图形;
获取各个人脸器官在所述人脸轮廓图形中的第一相对位置;
利用所述第一相对位置对所述目标图像进行人脸器官的定位,得到各个人脸器官在所述目标图像中的器官中心坐标,并基于多个所述器官中心坐标,识别出各个人脸器官在所述目标图像中分别对应的第一图像区域;
对各个所述第一图像区域分别进行坐标提取,得到各个人脸器官在所述目标图像中分别对应的所述坐标组。


4.如权利要求3所述的视频卡顿识别方法,其特征在于,获取各个人脸器官在所述人脸轮廓图形中的第一相对位置,包括:
将所述人脸轮廓图形与人脸轮廓库中的多个样本轮廓图像进行图形匹配;
若匹配成功,获取匹配成功的所述样本轮廓图形对应的相对位置集,所述相对位置集中包含各个人脸器官在所述样本轮廓图形中的第二相对位置;将所述相对位置集中的各个人脸器官对应的第二相对位置,作为各个人脸器官在所述人脸轮廓图形中的第一相对位置。


5.如权利要求3所述的视频卡顿识别方法,其特征在于,所述基于多个所述器官中心坐标,识别出各个人脸器官在所述目标图像中分别对应的第一图像区域:...

【专利技术属性】
技术研发人员:胡甜敏
申请(专利权)人:深圳壹账通智能科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1