一种快速定位关联视频内容的方法、存储介质及设备技术

本发明专利技术公开了一种快速定位关联视频内容的方法、存储介质及设备，包括如下步骤：S1、获取课堂的视频及对应的课件；S2、对步骤S1获取的课件进行文本提取及页码识别；S3、获取视频中包含课件内容的关键帧，构成课件帧集合；S4、对步骤S3得到的课件帧集合进行去重处理后得到课件切换页帧集合；S5、将所述课件切换页帧集合中的各帧与对应课件页进行关联；S6、当用户点击课件的目标页面时，获取该页面对应的页码，根据该页码检索到视频对应的课件帧，并控制视频的进度跳转至该课件帧的位置。本发明专利技术通过结合文字识别、页码识别等技术，实现自动化地将课件内容与视频资源进行定位关联，从而有效减少视频内容制作者的后期工作，方便用户高效利用视频资源。效利用视频资源。

【技术实现步骤摘要】
一种快速定位关联视频内容的方法、存储介质及设备


[0001]本专利技术涉及视频数据处理
，具体涉及一种快速定位关联视频内容的方法、存储介质及设备。

技术介绍

[0002]当前的智慧课堂中，通常会将课堂过程包括讲师讲解视频画面和幻灯演示部分录制为一份完整的视频文件，保存并下载为本地文件后，通过专业的剪辑软件进行剪辑处理。在剪辑过程中，首先需要制作者完整播放课堂视频，确认并记录需要剪辑的片段的大致时间范围，包括其开始时间和结束时间，其次，需要制作者对音视频开始时间点和结束时间点进行反复播放，在需要剪辑的节点进行截断，并在截取后进行反复收听以确保截取内容文本连贯完整，同样的，如果想要删除某个片段，也需要在截取删除后反复收听，以确保剩余片段内容仍旧连续完整，如果发现剪辑后的内容有偏差，则需要反复执行撤销和重新剪辑操作，以确保课堂内容没有丢失。
[0003]专业的音视频编辑软件操作较为复杂，对专业的培训人员产生较大的学习成本，且在剪辑过程中，需要对较长时长的视频文件反复进行回放操作，才能找到想要剪辑的以确认需要进行剪辑的某个时间点或者某一帧，且由于手指或鼠标的操作精准度不够，在实际操作过程中需要反复多次选取截断点才能完成一次截断，不然很容易让整体课程内容不连贯，整个课程剪辑过程费时费力，更不利于知识内容的快速生成和快速的更新迭代。

技术实现思路

[0004]针对现有技术的不足，本专利技术旨在提供一种快速定位关联视频内容的方法、存储介质及设备。
[0005]为了实现上述目的，本专利技术采用如下技术方案：
[0006]一种快速定位关联视频内容的方法，包括如下步骤：
[0007]S1、获取课堂的视频及对应的课件；
[0008]S2、对步骤S1获取的课件进行文本提取及页码识别；
[0009]S3、获取视频中包含课件内容的关键帧，构成课件帧集合；
[0010]S4、对步骤S3得到的课件帧集合进行去重处理后得到课件切换页帧集合；
[0011]S5、将所述课件切换页帧集合中的各帧与对应课件页进行关联：
[0012]S5.1、依次识别所述课件切换页帧集合中的各课件帧的页码，将识别出页码的各课件帧与对应的页码进行关联绑定；
[0013]S5.2、在步骤S1获取的视频对应的索引文件中记录课件切换页帧集合中的各课件帧对应的时间戳信息以及页码信息；
[0014]S6、当用户点击课件的目标页面时，获取该页面对应的页码，根据该页码检索到视频对应的课件帧，并控制视频的进度跳转至该课件帧的位置。
[0015]进一步地，步骤S3的具体过程为：
[0016]依次对步骤S1获得的视频的关键帧进行ocr识别，并依次将识别出的文本结果与步骤S1获取的课件每页的文本结果进行检验匹配，当相似度大于预设第一相似度阈值时，判定该关键帧为课件帧，将所述课件帧存入所述课件帧集合。
[0017]进一步地，步骤S3的具体过程为：依次对步骤S1获得的视频的关键帧进行课件关键特征识别，据此判断当前关键帧是否为包含课件内容的帧，若包含，则所述关键帧为课件帧，将所述课件帧存入所述课件帧集合。
[0018]进一步地，步骤S4的具体过程为：
[0019]S4.1、判断步骤S3得到的课件帧集合是否存在被比对帧，若不存在，则以当前课件帧集合的第一帧作为被比对帧，并将该被比对帧存入课件切换页帧集合；
[0020]S4.2、判断当前的被比对帧在当前课件帧集合中是否存在下一帧，若不存在，则结束；若存在则获取当前被比对帧的下一帧作为比对帧进行相似度对比，跳转至步骤S4.3；
[0021]S4.3、若被比对帧和比对帧的相似度大于或等于预设第二相似度阈值，则所述比对帧为重复帧，将该重复帧从所述课件帧集合中删除，并返回步骤S4.2；若被比对帧和比对帧的相似度小于预设第二相似度阈值，则所述比对帧不为重复帧，将所述被比对帧从当前课件帧集合中删除，然后返回步骤S4.1。
[0022]更进一步地，对最终得到的课件切换页帧集合进一步进行帧去重处理，对于包含的课件内容相同的课件帧，将时间在后的课件帧删除。
[0023]本专利技术还提供一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述方法。
[0024]本专利技术还提供一种计算机设备，包括处理器和存储器，所述存储器用于存储计算机程序；所述处理器用于执行所述计算机程序时，实现上述方法。
[0025]本专利技术的有益效果在于：本专利技术通过结合文字识别、页码识别等技术，实现自动化地将课件内容与视频资源进行定位关联，从而有效减少视频内容制作者的后期工作，方便用户高效利用视频资源。
具体实施方式
[0026]以下将对本专利技术作进一步的描述，需要说明的是，本实施例以本技术方案为前提，给出了详细的实施方式和具体的操作过程，但本专利技术的保护范围并不限于本实施例。
[0027]本实施例提供一种快速定位关联视频内容的方法，包括如下步骤：
[0028]S1、获取课堂的视频及对应的课件；
[0029]S2、对步骤S1获取的课件进行文本提取及页码识别；文本提取和页码识别技术比较成熟，此处不再赘述。
[0030]S3、获取视频中包含课件内容的关键帧，构成课件帧集合。
[0031]作为一种实施方式，依次对步骤S1获得的视频的关键帧进行ocr识别，并依次将识别出的文本结果与步骤S1获取的课件每页的文本结果进行检验匹配，当相似度大于预设第一相似度阈值时，判定该关键帧为课件帧，将所述课件帧存入所述课件帧集合。
[0032]作为另一种实施方式，依次对步骤S1获得的视频的关键帧进行课件关键特征识别(如课件背景特征、课件标题特征等)，据此判断当前关键帧是否为包含课件内容的帧，若包含，则所述关键帧为课件帧，将所述课件帧存入所述课件帧集合。
[0033]S4、对步骤S3得到的课件帧集合进行去重处理后得到课件切换页帧集合：
[0034]S4.1、判断步骤S3得到的课件帧集合是否存在被比对帧，若不存在，则以当前课件帧集合的第一帧作为被比对帧，并将该被比对帧存入课件切换页帧集合。
[0035]S4.2、判断当前的被比对帧在当前课件帧集合中是否存在下一帧，若不存在，则结束；若存在则获取当前被比对帧的下一帧作为比对帧进行相似度对比，跳转至步骤S4.3；
[0036]S4.3、若被比对帧和比对帧的相似度大于或等于预设第二相似度阈值，则所述比对帧为重复帧，将该重复帧从所述课件帧集合中删除，并返回步骤S4.2；若被比对帧和比对帧的相似度小于预设第二相似度阈值，则所述比对帧不为重复帧，将所述被比对帧从当前课件帧集合中删除，然后返回步骤S4.1。
[0037]在本实施例中，对所述课件切换页帧集合进一步进行帧去重处理，对于包含的课件内容相同的课件帧，将时间在后的课件帧删除。因为有可能视频中出现误操作，导致出现翻页错误的课件，所以导致同一个课件页面，在视频中本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种快速定位关联视频内容的方法，其特征在于，包括如下步骤：S1、获取课堂的视频及对应的课件；S2、对步骤S1获取的课件进行文本提取及页码识别；S3、获取视频中包含课件内容的关键帧，构成课件帧集合；S4、对步骤S3得到的课件帧集合进行去重处理后得到课件切换页帧集合；S5、将所述课件切换页帧集合中的各帧与对应课件页进行关联：S5.1、依次识别所述课件切换页帧集合中的各课件帧的页码，将识别出页码的各课件帧与对应的页码进行关联绑定；S5.2、在步骤S1获取的视频对应的索引文件中记录课件切换页帧集合中的各课件帧对应的时间戳信息以及页码信息；S6、当用户点击课件的目标页面时，获取该页面对应的页码，根据该页码检索到视频对应的课件帧，并控制视频的进度跳转至该课件帧的位置。2.根据权利要求1所述的方法，其特征在于，步骤S3的具体过程为：依次对步骤S1获得的视频的关键帧进行ocr识别，并依次将识别出的文本结果与步骤S1获取的课件每页的文本结果进行检验匹配，当相似度大于预设第一相似度阈值时，判定该关键帧为课件帧，将所述课件帧存入所述课件帧集合。3.根据权利要求1所述的方法，其特征在于，步骤S3的具体过程为：依次对步骤S1获得的视频的关键帧进行课件关键特征识别，据此判断当前关键帧是否为包含课件内容的帧，若包含，则所述关键帧为课件帧，...

【专利技术属性】
技术研发人员：陈家峰，季英会，
申请(专利权)人：读书郎教育科技有限公司，
类型：发明
国别省市：