一种具有多种检索方式的多媒体系统及处理方法技术方案

本发明专利技术涉及一种多媒体系统，包括拍摄终端、服务器和查询终端；其特征在于：查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元；其中，所述查询终端用于供用户通过多种方法检索所述多媒体。本发明专利技术还涉及一种使用所述多媒体系统的多媒体方法。

【技术实现步骤摘要】
一种具有多种检索方式的多媒体系统及处理方法
本专利技术涉及多媒体领域，特别涉及能够进行检索的多媒体领域。
技术介绍
随着网络和多媒体技术的广泛应用，网络培训已成为员工培训的必然发展趋势。然而，网络培训面临着“来源单一、脱离实践、滞后现场”的问题，尤其是缺少以现场案例为内容的生产技能类培训，这势必会影响以生产技能操作为主的员工培训效果。因此，积极引入现场案例教学，探索智能终端和移动网络的应用，将成为网络培训和资源建设的新方向。
技术实现思路
本专利技术涉及一种多媒体系统，包括拍摄终端、服务器和查询终端；其特征在于：查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元；其中，所述查询终端用于供用户通过多种方法检索所述多媒体。本专利技术还涉及一种使用所述多媒体系统的多媒体处理方法，其特征在于包括以下步骤：步骤S100，用户使用拍摄终端拍摄多媒体，所述多媒体包括视频和音频；当在某一位置和/或变焦拍摄时，由计时单元记录下拍摄的开始时间和结束时间；随后，计时单元将事件、开始时间和结束时间一并保存到第一存储单元的记录表中，其中所述事件包括位置、变焦；步骤S200，将多媒体中的音频转换为文字，转换后，在拍摄终端上显示给用户，供用户确认；如果用户认为转换的文字内容有错误或需要调整，则使用拍摄终端的第一输入单元进行修改；步骤S220，拍摄终端通过第一传输单元将拍摄的多媒体、第一存储单元中的记录表、以及经过用户确认的文字上传到服务器的第二传输单元，服务器将拍摄的多媒体保存到数据库中，并记录多媒体ID，所述多媒体ID是上传的多媒体的唯一标识；步骤S240，服务器根据记录表中的事件、开始时间和结束时间，使用解析单元从多媒体的视频中提取关键帧，并确定关键帧的录制时长，所述关键帧为拍摄终端在同一事件下拍摄的视频帧的代表；步骤S260，得到视频中每个事件对应的关键帧和事件的持续时间，其中根据每个事件的开始时间和结束时间获取持续时间；步骤S300，服务器从上传的文字中提取文字索引；对于每一个多媒体，服务器形成多媒体索引表，并存储在第二存储单元中；所述多媒体索引表包括：多媒体ID、文字索引、关键帧集合以及事件持续时间集合；步骤S400，用户使用查询终端查找所述多媒体；步骤S420，若查询终端中输入的是纯文字，则仅在文字索引中进行检索，并将检索结果呈现给用户，同时向用户提供没有文字说明的多媒体数目；步骤S440，若查询终端中输入的仅是M幅照片，则查询终端形成照片集X：X＝{X1,X2,…Xi,…XM}则比较照片集X中的每幅照片和关键帧集合中的每个关键帧是否匹配，然后根据照片和关键帧的匹配程度，检索出相应的视频，并将按照相似度排序的检索结果呈现给用户；相似度Sim的计算公式如下：其中，M为照片集X中的照片数量；e为视频中的事件数量，即关键帧数量；Ti为第i个事件的持续时间；Tij的取值有两个，当照片和关键帧不匹配时，Tij＝0；当照片和关键帧匹配时，Tij为匹配的第i个事件的持续时间；步骤S460，若查询终端输入的既包括文字又包括照片，则先在文字索引中进行检索，如果检索结果少于特定阈值，则直接将结果呈现给用户；反之，如果检索结果大于或等于特定阈值，则在文字检索到的结果中使用步骤S440中的方法进行再次检索，并将检索结果呈现给用户。本专利技术的多媒体系统及多媒体处理方法特别适用于以生产现场为背景的基于移动智能终端的现场案例培训，获得了以生产实践为基础、培训内容来源多样化的有益效果。并且，本专利技术的多媒体系统及多媒体处理方法能够使用户采用多种方法查找所述多媒体，为用户查询提供了准确性和便利性。附图说明图1是多媒体系统的框图；图2是拍摄终端位置变化的示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，将结合附图对本专利技术作进一步地详细描述。这种描述是通过示例而非限制的方式介绍了与本专利技术的原理相一致的具体实施方式，这些实施方式的描述是足够详细的，以使得本领域技术人员能够实践本专利技术，在不脱离本专利技术的范围和精神的情况下可以使用其他实施方式并且可以改变和/或替换各要素的结构。因此，不应当从限制性意义上来理解以下的详细描述。如图1所示，本专利技术的多媒体系统包括拍摄终端、服务器和查询终端。拍摄终端包括第一摄像单元、录音单元、记录单元、第一输入单元、第一传输单元、第一存储单元、显示单元等。优选的，拍摄终端还包括计时单元(例如计时器)、焦距检测单元。服务器包括第二传输单元、解析单元、数据库、第二存储单元等。查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元等。多媒体系统的处理流程如下所示：在步骤S100，用户使用拍摄终端拍摄多媒体，所述多媒体包括视频和音频；在某一位置拍摄时，由计时单元记录下在某一位置拍摄的开始时间和结束时间；当移动拍摄位置或变换焦距时，由计时单元记录下移动拍摄位置或变换焦距后拍摄的开始时间和结束时间；随后，计时单元将事件(包括位置/变焦)、开始时间和结束时间一并保存到第一存储单元的记录表中。下面参考图2详细说明拍摄终端由位置A移动到位置B再移动到位置C的过程，以及计时单元的计时过程。首先，在位置A，当用户打开拍摄终端的第一摄像单元开始拍摄时，将自动触发计时单元开始计时，此时由计时单元记录下位置A的开始时间(例如0秒)。可选的，也可由用户操作拍摄终端的特定物理按键或触摸屏上显示的特定按键以触发计时单元开始计时。一段时间后，当在位置A拍摄完成时，由用户操作上述特定按键结束在位置A的计时，并由计时单元记录下结束时间(例如180秒)。随后，计时单元将记录的位置A、开始时间和结束时间保存到第一存储单元的记录表中。之后，将拍摄终端移动到位置B继续进行拍摄，由用户操作上述特定按键开始在位置B的计时，并由计时单元记录下位置B的开始时间(例如181秒)。又一段时间后，当在位置B拍摄完成时，由用户操作上述特定按键结束位置B的计时，并由计时单元记录下结束时间(例如270秒)。随后，计时单元将记录的位置B、开始时间和结束时间保存到第一存储单元的记录表中。之后，再将拍摄终端移动到位置C继续进行拍摄，由用户操作上述特定按键开始在位置C的计时，并由计时单元记录下位置C的开始时间(例如271秒)。又拍摄一段时间后，当在位置C拍摄完成时，由用户关闭拍摄终端的第一摄像单元停止拍摄，此时将自动触发计时单元结束位置C的计时，并由计时单元记录下结束时间(例如300秒)。可选的，也可由用户操作上述特定按键结束计时。随后，计时单元将记录的位置C、开始时间和结束时间也保存到第一存储单元的记录表中。另外，当用户暂停拍摄终端的第一摄像单元拍摄时，将自动触发计时单元结束计时；以及，当拍摄终端的第一摄像单元恢复拍摄时，也将自动触发计时单元继续开始计时。上述计时单元的自动触发，无需用户额外操作拍摄终端的按键，从而提高了效率。第一存储单元中的记录表包括事件、开始时间和结束时间，格式优选示例如下：表1：记录表事件开始时间Tb结束时间Te位置A0秒180秒位置B181秒270秒位置C271秒300秒在另一优选实施例中，在拍摄过程中当用户操作拍摄终端变化焦距时，同样可以记录下变化焦距发生的开始时间和结束时间。在该优选实施例中，假设在位置B使用近焦拍摄完成时，由用户操作拍摄终端的特定物理按键本文档来自技高网...

【技术保护点】
一种多媒体系统，包括拍摄终端、服务器和查询终端；其特征在于：查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元；其中，所述查询终端用于供用户通过多种方法检索所述多媒体。

【技术特征摘要】
1.一种使用多媒体系统的多媒体处理方法，所述多媒体系统包括拍摄终端、服务器和查询终端，查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元；其中，所述查询终端用于供用户通过多种方法检索所述多媒体；其特征在于包括以下步骤：步骤S100，用户使用拍摄终端拍摄多媒体，所述多媒体包括视频和音频；当在某一位置和/或变焦拍摄时，由计时单元记录下拍摄的开始时间和结束时间；随后，计时单元将事件、开始时间和结束时间一并保存到第一存储单元的记录表中，其中所述事件包括位置、变焦；步骤S200，将多媒体中的音频转换为文字，转换后，在拍摄终端上显示给用户，供用户确认；如果用户认为转换的文字内容有错误或需要调整，则使用拍摄终端的第一输入单元进行修改；步骤S220，拍摄终端通过第一传输单元将拍摄的多媒体、第一存储单元中的记录表、以及经过用户确认的文字上传到服务器的第二传输单元，服务器将拍摄的多媒体保存到数据库中，并记录多媒体ID，所述多媒体ID是上传的多媒体的唯一标识；步骤S240，服务器根据记录表中的事件、开始时间和结束时间，使用解析单元从多媒体的视频中提取关键帧，并确定关键帧的录制时长，所述关键帧为拍摄终端在同一事件下拍摄的视频帧的代表；步骤S260，得到视频中每个事件对应的关键帧和事件的持续时间，其中根据每个事件的开始时间和结束时间获取持续时间；步骤S300，服务器从上传的文字中提取...

【专利技术属性】
技术研发人员：秦衡，谢清玉，崔凤磊，张耀坤，李荣凯，
申请(专利权)人：国家电网公司，国网技术学院，
类型：发明
国别省市：北京;11