一种多媒体教学的音频处理方法及系统技术方案

本发明专利技术公开了一种多媒体教学的音频处理方法及系统，该方法包括采集用户终端的音频信息；将所述的音频信息与触发语料库进行匹配，若匹配成功生成目标音频，并将所述目标音频转换成文字信息，对所述文字信息进行显示，若匹配不成功生成空白音频；对空白音频所对应的音频信息进行修正，将修正后的音频信息补入触发语料库，完成触发语料库的扩充；对触发语料库内的差异信息按照级别等级值进行排序，辅助教学；本发明专利技术中获取学生终端与教师终端针对同一技术问题的差异信息，基于差异信息获取差异信息的级别等级值，将教学过程中的重点、难点及问题出现频率和时间进行排序，有助于教师终端对教学过程中的教学问题进行及时把控，有助于提供教学质量。提供教学质量。提供教学质量。

【技术实现步骤摘要】
一种多媒体教学的音频处理方法及系统


[0001]本专利技术涉及多媒体教学
，具体涉及一种多媒体教学的音频处理方法及系统。

技术介绍

[0002]随着科学技术的发展多媒体教学逐渐出现在生活中，例如在学校内的课堂或者网上的远程教学中。通常，多媒体教学系统中配置有电脑、投影仪以及音响等，教学可以利用投影仪或者电脑进行教学材料的展示以方便学生阅读，然而，教师在使用多媒体教学系统时往往是通过PPT将教学内容展示出来，当教师需要补充额外的内容、回答问题或者学生对问题提出疑问、回答时都需要教师在多媒体系统上进行书写，增加了教师的负担，不能够适应课堂上教学的变化，辅助作用差，教学效率低。
[0003]如专利申请号202111546728.0公开了一种多媒体教学的音频处理方法、系统及存储介质，智能捕捉单元用于采集对象的音频信息，将音频信息与触发语料库进行匹配，当匹配成功生成目标音频并传输至音频转换单元，音频转换单元用于将目标音频转换成文字信息，当老师和/或学生描述内容时可以将音频信息转化为文字信息，多媒体显示模块用于将文字信息进行显示，减少了教师书写的时间和负担，能够适应课堂上教学的变化，辅助作用好，有利于提高教学效率；而当匹配成功生成目标音频并传输至音频转换单元，使得所转化的目标音频与教学内容相关，有利于减少音频转换单元转换无关内容而消耗的资源。
[0004]但是该技术中缺少对空白音频在触发语料库中的补充，导致下次出现类似该音频信息时还是显示空白音频，同时未对多媒体教学过程中的重点难点问题进行识别。
专利
技术实现思路

[0005]本专利技术的目的在于提供一种多媒体教学的音频处理方法，对空白音频的音频信息进行筛选，将音频信息不在预设范围内音频信息进行剔除，对空白音频的音频信息进行文字显示，得到实时文字信息，用户终端对输入的音频信息进行手动输入，得到初始文字信息，将初始文字信息转换成初始声音波形图，将实时文字信息转换成实时声音波形图，将初始声音波形图与实时声音波形图进行重叠，得到初始声音波形图与实时声音波形图未重叠区域信息，从而获得该空白音频的修正值，根据修正值对该空白音频是系统不能识别还是音频有错误不能识别进行判断，对空白音频是系统不能识别的音频进行文字补充输入，使触发语料库下一次接触该空白音频所对应的音频信息时能够识别。
[0006]本专利技术的目的可以通过以下技术方案实现：一种多媒体教学的音频处理方法，包括以下步骤:S1：采集用户终端的音频信息；S2：将所述的音频信息与触发语料库进行匹配，若匹配成功生成目标音频，并将所述目标音频转换成文字信息，对所述文字信息进行显示，若匹配不成功生成空白音频；S3：对空白音频所对应的音频信息进行修正，将修正后的音频信息补入触发语料
库，完成触发语料库的扩充；S4：对触发语料库内的差异信息按照级别等级值进行排序，辅助教学。
[0007]作为本专利技术进一步的方案：S1中所述用户终端包括学生终端和教师终端。
[0008]作为本专利技术进一步的方案：S1中用户终端的音频信息的内容还包括该音频信息采集的时间，音频信息的教学类别及基于该教学类别所对应音频信息的频率和次数。
[0009]作为本专利技术进一步的方案：S3中空白音频所对应的音频信息的修正过程为：对音频信息进行筛选，将音频信息不在预设范围内音频信息进行剔除；将处理后的音频信息进行文字显示，得到实时文字信息，用户终端对输入的音频信息进行手动输入，得到初始文字信息，将初始文字信息与实时文字信息进行波形转换；将初始文字信息转换成初始声音波形图，将实时文字信息转换成实时声音波形图，将初始声音波形图与实时声音波形图进行重叠，得到重叠图；将重叠图放置在白色底纹图上；同时将初始声音波形图与实时声音波形图之间形成的封闭面积图上黑色；对重叠图进行拍照得到重叠照片，对重叠照片放大若干倍形成像素格重叠照片；统计像素格重叠照片中黑色的像素格个数，并标记为Gi；设定该空白音频所对应的音频信息生成空白音频的次数为Pi,该空白音频所对应的音频信息在用户终端出现的总次数为Ti;利用公式获取得到空白音频对应的修正值GY；其中，d1、d2和d3均为预设比例系数，μ为修正因子，取值为0.9365；λ为误差干扰值，取值为2.872。
[0010]作为本专利技术进一步的方案：预设空白音频的修正值阈值为gy，将空白音频的修正值GY与空白音频的修正值阈值gy进行比较；若空白音频的修正值GY≥空白音频的修正值阈值gy，则推定该音频信息为异常音频信息，得到异常音频信息告警提示，基于异常音频信息告警提示进行音频信息的手动输入，完成触发语料库内文字信息的扩充；若空白音频的修正值GY＜空白音频的修正值阈值gy，则推定该音频信息为异常音频信息为正常音频信息。
[0011]作为本专利技术进一步的方案：基于异常音频信息得到异常音频信息告警提示，基于异常音频信息告警提示进行音频信息的手动输入，完成触发语料库内文字信息的扩充。
[0012]作为本专利技术进一步的方案：音频信息的手动输入的内容为用户终端空白音频所对应的文字内容。
[0013]作为本专利技术进一步的方案：S4中，对触发语料库内的差异信息的更新过程为：获取学生终端与教师终端针对同一技术问题的差异信息，基于差异信息得到差异值CY；获取各差异信息的教学时间,将差异信息的教学时间标记为CTi，差异信息的教学时间为差异信息最近一次出现的教学时间与当前时间的差值；获取各差异信息所对应技术问题出现的次数，将差异信息出现的次数标记为CCi;
通过公式获取得到差异信息的级别等级值Qc,其中，a1、a2与a3均为预设比例系数，a1、a2与a3均大于零，为误差修正因子，的取值为1.687423；根据差异信息的级别等级值Qc大到小的顺序将差异信息在多媒体显示终端进行排序。
[0014]作为本专利技术进一步的方案：S4中，差异值的获取过程为：将针对同一技术问题学生终端答案与教学终端答案进行波形转换，得到学生答案波形图和教学答案波形图；将学生答案波形图和教学答案波形图进行重叠，得到重叠图，将重叠图放置在白色底纹图上；同时将学生答案波形图和教学答案波形图之间形成的封闭面积图上黑色，统计像素格重叠照片中黑色的像素格个数，标记为Ki,i为学生终端的编号，i=1，
……
，m；通过公式计算得到差异值CY，n为修正系数。
[0015]作为本专利技术进一步的方案：一种多媒体教学的音频处理系统,包括音频采集模块、音频匹配模块、音频修正模块和教学辅助模块；音频采集系统用于采集用户终端的音频信息，终端用户包括学生终端和教师终端；数据匹配模块用于将所述的音频信息与触发语料库进行匹配，若匹配成功生成目标音频，并将所述目标音频转换成文字信息，对所述文字信息进行显示，若匹配不成功生成空白音频；音频修正模块用于对空白音频所对应的音频信息进行修正，将修正后的音频信息补入触发语料库，完成触发语料库的扩充；教学辅助模块用于对触发语料库内的差异信息按照级别等级值进行排序，辅助教学。
[0016]本专利技术的有益效果：本专利技术中对空白音频的音频信息本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多媒体教学的音频处理方法，其特征在于，包括以下步骤:S1：采集用户终端的音频信息；S2：将所述的音频信息与触发语料库进行匹配，若匹配成功生成目标音频，并将所述目标音频转换成文字信息，对所述文字信息进行显示，若匹配不成功生成空白音频；S3：对空白音频所对应的音频信息进行修正，将修正后的音频信息补入触发语料库，完成触发语料库的扩充；S4：对触发语料库内的差异信息按照级别等级值进行排序，辅助教学。2.根据权利要求1所述的一种多媒体教学的音频处理方法,其特征在于，S1中所述用户终端包括学生终端和教师终端。3.根据权利要求1所述的一种多媒体教学的音频处理方法,其特征在于，S1中用户终端的音频信息的内容还包括该音频信息采集的时间，音频信息的教学类别及基于该教学类别所对应音频信息的频率和次数。4.根据权利要求1所述的一种多媒体教学的音频处理方法,其特征在于，S3中空白音频所对应的音频信息的修正过程为：对音频信息进行筛选，将音频信息不在预设范围内音频信息进行剔除；将处理后的音频信息进行文字显示，得到实时文字信息，用户终端对输入的音频信息进行手动输入，得到初始文字信息，将初始文字信息与实时文字信息进行波形转换；将初始文字信息转换成初始声音波形图，将实时文字信息转换成实时声音波形图，将初始声音波形图与实时声音波形图进行重叠，得到重叠图；将重叠图放置在白色底纹图上；同时将初始声音波形图与实时声音波形图之间形成的封闭面积图上黑色；对重叠图进行拍照得到重叠照片，对重叠照片放大若干倍形成像素格重叠照片；统计像素格重叠照片中黑色的像素格个数，并标记为Gi；设定该空白音频所对应的音频信息生成空白音频的次数为Pi,该空白音频所对应的音频信息在用户终端出现的总次数为Ti;利用公式获取得到空白音频对应的修正值GY；其中，d1、d2和d3均为预设比例系数，μ为修正因子，取值为0.9365；λ为误差干扰值，取值为2.872。5.根据权利要求4所述的一种多媒体教学的音频处理方法,其特征在于，预设空白音频的修正值阈值为gy，将空白音频的修正值GY与空白音频的修正值阈值gy进行比较；若空白音频的修正值GY≥空白音频的修正值阈值gy，则推定该音频信息为异常音频信息，得到异常音频信息告警提示，基于异常音频信息告警提示进行音频信息的手动输入，完成触发语料库内文字信息的扩充；若空白音频的修正值GY＜空白音频的修正值阈值gy，则推...

【专利技术属性】
技术研发人员：刘洋，黄鑫，张晓诺，
申请(专利权)人：日照职业技术学院，
类型：发明
国别省市：