上课内容记录方法、相关装置和介质制造方法及图纸

本公开提供了一种上课内容记录方法、相关装置和介质，该方法包括：从板书视频中识别出书写内容记录文本；从音频文件中识别出语音内容记录文本，所述板书视频和所述音频文件为在教师讲课时同步采集；对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本。本公开能够精准定位相关授课内容，降低了查找相关授课内容的耗时。内容的耗时。内容的耗时。

【技术实现步骤摘要】
上课内容记录方法、相关装置和介质


[0001]本公开涉及智慧教育
，具体涉及一种上课内容记录方法、相关装置和介质。

技术介绍

[0002]随着网络课堂的流行与普及，教学视频成为一种不可或缺的教育资源。教学视频是通过摄像头、录播主机和拾音麦克风等方式拍摄教学场景而得到的视频。教学场景中，教师通过在写字板上书写内容并且讲解该内容来进行教学，这样，授课内容以视频方式进行记录和保存。然而，如果想要复盘授课内容，需要以回看视频录像的方式进行翻看，不能精准定位相关授课内容，增加了查找相关授课内容的耗时。

技术实现思路

[0003]为了解决上述技术问题，本公开提供了一种上课内容记录方法、相关装置和介质，能够精准定位相关授课内容，降低了查找相关授课内容的耗时。
[0004]根据本公开第一方面，提供了一种上课内容记录方法，包括：
[0005]从板书视频中识别出书写内容记录文本；
[0006]从音频文件中识别出语音内容记录文本，所述板书视频和所述音频文件为在教师讲课时同步采集；
[0007]对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本。
[0008]可选地，所述从板书视频中识别出书写内容记录文本包括：
[0009]从所述板书视频中获取教学场景下的板书图像；
[0010]基于图像识别技术，识别所述板书图像上的板书内容并将其记为第一文本，其中，所述第一文本内容中添加了第一时间戳。
[0011]可选地，所述从音频文件中识别出语音内容记录文本包括：
[0012]从所述音频文件中获取教学场景下的音频内容；
[0013]基于语音识别技术，识别所述音频内容中的音频信息并将其记为第二文本，其中，所述第二文本内容与所述音频内容的语音时间轴相对应。
[0014]可选地，所述从音频文件中识别出语音内容记录文本还包括：
[0015]基于声纹识别技术，识别讲述所述音频内容的所述教师的身份。
[0016]可选地，所述从音频文件中识别出语音内容记录文本还包括：
[0017]基于所述教师的历史讲课记录，利用自然语言处理技术，对所述第二文本进行语义解析；
[0018]基于语义解析结果，对所述第二文本进行校准，得到第三文本。
[0019]可选地，所述对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本包括：
[0020]基于所述音频内容的语音时间轴和所述第一时间戳，对所述第一文本和所述第三文本进行同步；
[0021]对所述第一文本和所述第三文本进行内容整合，得到初始上课内容记录文本；
[0022]将所述初始上课内容记录文本与预设知识库进行比对，将匹配的知识点添加到所述初始上课内容记录文本；
[0023]基于预设的内容记录格式，调整所述初始上课内容记录文本的记录格式以得到所述上课内容记录文本。
[0024]根据本公开第二方面，提供了一种上课内容记录装置，包括：
[0025]书写内容记录文本识别单元，用于从板书视频中识别出书写内容记录文本；
[0026]语音内容记录文本识别单元，用于从音频文件中识别出语音内容记录文本，所述板书视频和所述音频文件为在教师讲课时同步采集；
[0027]上课内容记录文本生成单元，用于对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本。
[0028]根据本公开第三方面，提供了一种摄像头，包括：
[0029]图像采集模块，用于获取板书视频；
[0030]音频采集模块，用于获取音频文件；
[0031]处理模块，电性连接所述图像采集模块和所述音频采集模块，所述处理模块用于执行上述任一项所述的方法。
[0032]根据本公开第四方面，提供了一种教学系统，包括：
[0033]摄像设备，用于获取板书视频；
[0034]录音设备，用于获取音频文件；
[0035]处理设备，电性连接所述摄像设备和所述录音设备，所述处理设备用于执行如上所述的方法。
[0036]根据本公开第五方面，提供了一种电子设备，包括：处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序，所述程序被所述处理器执行时实现如上所述的方法的步骤。
[0037]根据本公开第六方面，提供了一种存储介质，所述存储介质上存储有计算机程序或指令，所述计算机程序或指令被处理器执行时实现如上所述的方法的步骤。
[0038]根据本公开的实施例，从板书视频中识别出书写内容记录文本，从音频文件中识别出语音内容记录文本，利用板书视频和音频文件为在教师讲课时同步采集的这一特点，对书写内容记录文本与语音内容记录文本进行内容整合并将相关知识点添加到整合后的文本，形成上课内容记录文本，这样，可以通过关键词检索、目录查询等的方式，从上课内容记录文本中精准定位相关授课内容，降低了查找相关授课内容的耗时。同时，还可以在上课内容记录文本查阅相关授课内容的知识点，从上课内容记录文本中精准定位相关知识点，节省了查找相关知识点的耗时。
[0039]应当说明的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
[0040]图1示出根据本公开实施例提供的上课内容记录方法的流程示意图；
[0041]图2示出根据本公开实施例提供的上课内容记录文本的预设内容记录格式；
[0042]图3示出根据本公开实施例提供的上课内容记录方法的流程示意图；
[0043]图4示出根据本公开实施例提供的上课内容记录装置的结构示意图；
[0044]图5示出根据本公开实施例提供的教学系统的示意图；
[0045]图6示出根据本公开实施例提供的电子设备的结构示意图。
具体实施方式
[0046]为了便于理解本公开，下面将参照相关附图对本公开进行更全面的描述。附图中给出了本公开的较佳实施例。但是，本公开可以通过不同的形式来实现，并不限于本文所描述的实施例。相反的，提供这些实施例的目的是使对本公开的公开内容的理解更加透彻全面。
[0047]在本文中使用以下概念：
[0048]写字板：教学或会议等诸多场景下供书写内容的板子，包括但不限于黑板、绿板、蓝板以及白板。本公开所涉及到的写字板包括但不局限于黑板、绿板、蓝板以及白板，甚至是电子板，这里为方便后文描述简洁，将这些板书介质统称为写字板。
[0049]板书内容：教学场景中，教师通过在写字板上书写内容并同时对该内容详细讲解来进行教学。板书内容和语音内容是教学信息的载体，是教师完成教学任务的主要工具。板书内容是书写在写字板上的内容，包括但不限于以文字、符号以及图表等形式体现，本公开将板书内容的体现形式统称为字符。语音内容是在教学过程中对板书内容的详细讲解，以及教师和学生进行交流等教学相关内容。板书图像是摄像本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种上课内容记录方法，其特征在于，包括：从板书视频中识别出书写内容记录文本；从音频文件中识别出语音内容记录文本，所述板书视频和所述音频文件为在教师讲课时同步采集；对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本。2.根据权利要求1所述的上课内容记录方法，其特征在于，所述从板书视频中识别出书写内容记录文本包括：从所述板书视频中获取教学场景下的板书图像；基于图像识别技术，识别所述板书图像上的板书内容并将其记为第一文本，其中，所述第一文本内容中添加了第一时间戳。3.根据权利要求2所述的上课内容记录方法，其特征在于，所述从音频文件中识别出语音内容记录文本包括：从所述音频文件中获取教学场景下的音频内容；基于语音识别技术，识别所述音频内容中的音频信息并将其记为第二文本，其中，所述第二文本内容与所述音频内容的语音时间轴相对应。4.根据权利要求3所述的上课内容记录方法，其特征在于，所述从音频文件中识别出语音内容记录文本还包括：基于声纹识别技术，识别讲述所述音频内容的所述教师的身份。5.根据权利要求4所述的上课内容记录方法，其特征在于，所述从音频文件中识别出语音内容记录文本还包括：基于所述教师的历史讲课记录，利用自然语言处理技术，对所述第二文本进行语义解析；基于语义解析结果，对所述第二文本进行校准，得到第三文本。6.根据权利要求5所述的上课内容记录方法，其特征在于，所述对所述书写内容记录文本与所述语音内容记录文本进行内容整合并整理相关知识点，形成上课内容记录文本包括：基于所述音频内容的语音时间轴和所述第一时间戳，对所述第一文...

【专利技术属性】
技术研发人员：赵兴龙，周宇虹，黄玉麟，涂长伟，
申请(专利权)人：北京奕斯伟计算技术股份有限公司，
类型：发明
国别省市：