一种同步播放的检测方法、移动终端技术

本发明专利技术实施例提供了一种同步播放的检测方法、移动终端，该方法包括：当视频数据播放时，从所述视频数据中提取视频片段；检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。本发明专利技术实施例能够实现自动判断视频数据与字幕数据是否同步播放，大大减少了人工检测的操作，减少了时间的耗费，降低了检测的成本，并且，通过汇总各片段同步结果判断视频数据与字幕数据是否同步播放，平滑了片段同步结果的误差，得到一个更为稳定的视频同步结果，从而降低了错误率。

A synchronous playback detection method, mobile terminal

【技术实现步骤摘要】
一种同步播放的检测方法、移动终端
本专利技术涉及通信
，尤其涉及一种同步播放的检测方法、移动终端。
技术介绍
在生活中，用户经常可以看到诸多类型的视频，很多视频在播放时，会显示字幕，帮助观众更好地理解视频的内容。由于字幕是后期人工添加上去的，视频与字幕可能出现不同步播放的现象。目前，主要是依赖人工观看字幕是否与声音同步来判断视频与字幕是否同步播放，人工检测的方式耗费时间、成本较高，而且容易出错。
技术实现思路
本专利技术实施例提供一种同步播放的检测方法、移动终端，以解决人工检测视频与字幕是否同步播放的方式耗费时间、成本较高，而且容易出错的问题。为了解决上述技术问题，本专利技术是这样实现的：一种同步播放的检测方法，包括：当视频数据播放时，从所述视频数据中提取视频片段；检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。第一方面，本专利技术实施例还提供了一种移动终端，包括：视频片段提取模块，用于当视频数据播放时，从所述视频数据中提取视频片段；视频片段检测模块，用于检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；视频数据检测模块，用于依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。第二方面，本专利技术实施例还提供了一种移动终端，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现所述的同步播放的检测方法的步骤。第三方面，本专利技术实施例还提供了一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至m中任一项所述的同步播放的检测方法的步骤。在本专利技术实施例中，通过在视频数据播放时，从视频数据中提取视频片段，以检测与字幕数据是否同步播放，获得片段同步结果，进一步依据片段同步结果检测视频数据与字幕数据是否同步播放，获得视频同步结果，能够实现自动判断视频数据与字幕数据是否同步播放，大大减少了人工检测的操作，减少了时间的耗费，降低了检测的成本，并且，通过汇总各片段同步结果判断视频数据与字幕数据是否同步播放，平滑了片段同步结果的误差，得到一个更为稳定的视频同步结果，从而降低了错误率。附图说明图1为本专利技术的同步播放的检测方法实施例的流程图。图2为本专利技术的同步播放的检测方法另一实施例的流程图。图3为本专利技术的同步播放的检测方法又一实施例的流程图。图4为本专利技术的移动终端实施例的框图。图5为实现本专利技术各个实施例的一种移动终端的硬件结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。参照图1，示出了本专利技术的同步播放的检测方法实施例的流程图，具体可以包括如下步骤：步骤101，当视频数据播放时，从所述视频数据中提取视频片段。在具体实现中，本专利技术实施例可以应用在移动终端中，例如，手机、平板电脑、个人数字助理、穿戴设备(如眼镜、手表等)等等。这些移动设备的操作系统可以包括Android(安卓)、IOS、WindowsPhone、Windows等等，通常可以支持可播放视频数据及字幕数据的应用运行，例如，浏览器、视频播放器、即时通讯工具，等等。当然，本专利技术实施例也可以应用在个人电脑、智能电视等终端中，这些终端也可以支持可播放视频数据及字幕数据的应用运行，本专利技术实施例对此不加以限制。在本专利技术实施例中，在播放视频数据时，可以自动检测视频数据与字幕数据是否同步播放。在具体实现中，当视频数据播放时，从视频数据中提取视频片段，该视频片段的数量一般为两个或多个以上(如200个)，每个视频片段的长度可以相等(如长度均为1s)，也可以不相等，本专利技术实施例对此不加以限制。步骤102，检测所述视频片段与字幕数据是否同步播放，获得片段同步结果。在具体实现中，诸如演讲类、综艺类等以人说话为主的视频数据中，大多数时间均有人在画面中说话，相对应地配置字幕数据。因此，可以视频片段中提取人说话的特征，例如，从视频数据中提取语音数据、从视频数据的图像帧中提取人物特征(如嘴唇数据、肢体数据等)，等等，基于这些人说话的特征可以检测视频片段与字幕数据是否同步播放，从而获得片段同步结果。步骤103，依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。由于视频片段的片段同步结果给出的是某一小段时间内场景的片段同步结果，而实际情况下，视频数据是一个由连续和不断变化的场景组成的，如果靠一两次场景的片段同步结果判断视频数据与字幕数据是否同步播放，可能会有误差。因此，在本专利技术实施例中，可以汇总各场景的片段同步结果，判断视频数据与字幕数据是否同步播放，从而平滑了片段同步结果的误差，得到一个更为稳定的视频同步结果。在本专利技术实施例中，通过在视频数据播放时，从视频数据中提取视频片段，以检测与字幕数据是否同步播放，获得片段同步结果，进一步依据片段同步结果检测视频数据与字幕数据是否同步播放，获得视频同步结果，能够实现自动判断视频数据与字幕数据是否同步播放，大大减少了人工检测的操作，减少了时间的耗费，降低了检测的成本，并且，通过汇总各片段同步结果判断视频数据与字幕数据是否同步播放，平滑了片段同步结果的误差，得到一个更为稳定的视频同步结果，从而降低了错误率。参照图2，示出了本专利技术的同步播放的检测方法另一实施例的流程图，具体可以包括如下步骤：步骤201，当视频数据播放时，从所述视频数据中提取视频片段。步骤202，在所述视频片段中识别嘴型数据。由于人在说话时，口型变化是一个可视化的过程，因此，在本专利技术实施例中，可以在视频片段中检测嘴型数据，观察人(说话者)的口型变化。在一个实施方式中，可以在视频片段中进行人脸检测，几在视频片段中识别人脸数据。当识别出人脸数据时，在人脸数据中检测嘴型数据。当未识别出人脸数据时，丢弃视频片段，从而降低处理量，提高处理效率。当然，上述判断嘴型数据的识别方式只是作为示例，在实施本专利技术实施例时，可以根据实际情况设置其他嘴型数据的识别方式，例如，通过训练已有图像来得到定位脸部各位置的模板进行匹配、对彩色图像进行颜色空间变换或颜色处理、将包含嘴的区域灰度图像作为特征向量、将整个嘴唇作为一个向量进行主成分分析(PCA)，等等，本专利技术实施例对此不加以限制。另外，除了上述嘴型数据的识别方式外，本领域技术人员还可以根据实际需要采用其它嘴型数据的识别方式，本专利技术实施例对此也不加以限制。步骤203，判断所述嘴型数据是否发生变化；若是，则执行步骤204，若否，则执行步骤205。人在说话时，嘴唇一般会连同进行变化。以汉语发生为例，汉语具有两种拼读方法，拼读法(前音轻短后音重)和直呼法(先做声母的嘴形再做韵母的音)。每个声母和韵母都有特定的发音，使得用户在发出声母和韵母的读音时嘴型都有所变化，例如，发出声母“b”的读音时，双唇闭合，挡住气流，然后双唇突然打开，让气流爆发出来，声带颤动。在本专利技术实施例中，可以通过视频本文档来自技高网...

【技术保护点】
一种同步播放的检测方法，其特征在于，包括：当视频数据播放时，从所述视频数据中提取视频片段；检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。

【技术特征摘要】
1.一种同步播放的检测方法，其特征在于，包括：当视频数据播放时，从所述视频数据中提取视频片段；检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。2.根据权利要求1所述的方法，其特征在于，所述检测所述视频片段与所述字幕数据是否同步播放，获得多个片段同步结果，包括：在所述视频片段中识别嘴型数据；判断所述嘴型数据是否发生变化；当所述嘴型数据发生变化时，判断是否正在播放所述字幕数据；若是，则确定片段同步结果为所述视频片段与所述字幕数据同步播放；若否，则确定片段同步结果为所述视频片段与所述字幕数据不同步播放；当所述嘴型数据未发生变化时，判断是否正在播放所述字幕数据；若是，则确定片段同步结果为所述视频片段与所述字幕数据不同步播放；若否，则确定片段同步结果为所述视频片段与所述字幕数据同步播放。3.根据权利要求1或2所述的方法，其特征在于，所述依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果，包括：计算所述视频片段与所述字幕数据同步播放占所述片段同步结果的比例；判断所述比例是否超过预设的比例阈值；若是，则确定视频同步结果为所述视频数据与所述字幕数据同步播放；若否，则确定视频同步结果为所述视频数据与所述字幕数据不同步播放。4.根据权利要求3所述的方法，其特征在于，还包括：获取同步播放的样本视频数据及样本字幕数据；当所述样本视频数据播放时，从所述样本视频数据中提取样本视频片段；检测所述样本视频片段与所述样本字幕数据是否同步播放，获得样本片段同步结果；计算所述样本视频片段与所述样本字幕数据同步播放占所述样本片段同步结果的样本比例；依据所述样本比例计算比例阈值。5.根据权利要求4所述的方法，其特征在于，所述检测所述样本视频片段与所述样本字幕数据是否同步播放，获得样本片段同步结果，包括：在所述样本视频片段中识别样本嘴型数据；判断所述样本嘴型数据是否发生变化；当所述样本嘴型数据发生变化时，判断是否正在播放所述样本字幕数据；若是，则确定样本片段同步结果为所述样本视频片段与所述样本字幕数据同步播放；若否，则确定样本片段同步结果为所述样本视频片段与所述样本字幕数据不同步播放；当所述样本嘴型数据未发生变化时，判断是否正在播放所述样本字幕数据；若是，则确定样本片段同步结果为所述样本视频片段与所述样本字幕数据不同步播放；若否，则确定样本片段同步结果为所述样本视频片段与所述样本字幕数据同步播放。6.一种移动终端，其特征在于，包括：视频片段提取模块，用于当视频数据播放时，从所述视频数据中提取视频片段；视频片段检测模块，用于检测所述视频片段与字幕数据是否同步播放，获得片段同步结果；视频数据检测模块，用于依据所述片段同步结果检测所述视频数据与所述字幕数据是否同步播放，得到视频同步结果。7.根据权利要求6所述的移动终端，其特征在于，所述视频片段检测模块包括：嘴型数据识别子模块，...

【专利技术属性】
技术研发人员：沈志远，
申请(专利权)人：维沃移动通信有限公司，
类型：发明
国别省市：广东,44