会议纪要的生成方法、装置、计算机设备和存储介质制造方法及图纸

本申请提供了一种会议纪要的生成方法、装置、计算机设备和存储介质，首先采集会议视频和会议音频，会议视频和会议音频的时序同步。然后通过会议视频和/或会议音频识别所有参会人员的身份信息，并基于时序同步从会议音频中获取各个参会人员的发言信息。最后从各个发言信息中挖掘出重点内容，并根据各个发言信息、各个重点内容和对应的身份信息结合生成会议纪要。本申请通过对会议视频和会议音频进行参会人员的身份信息识别和重点内容挖掘，结合参会人员自身的所有发言信息，可以自动形成该次会议的会议纪要，不需要人工进行整理，方便快捷，能够有效提高企业的办公效率。能够有效提高企业的办公效率。能够有效提高企业的办公效率。

【技术实现步骤摘要】
会议纪要的生成方法、装置、计算机设备和存储介质


[0001]本申请涉及数据处理
，特别涉及一种会议纪要的生成方法、装置、计算机设备和存储介质。

技术介绍

[0002]在开设会议后，企业人员通常需要记录会议纪要信息，以便未参加会议人员可以阅读会议纪要以了解会议内容，参加会议人员可以再次阅读，复习会议内容。
[0003]现有会议纪要通常需要企业人员进行人工整理才能形成，在会议的开设频率比较高或者会议内容较多的情况下，人工整理会议纪要需要花费较长的时间，效率太低，且成本较高，无法适应现代快节奏的办公模式。

技术实现思路

[0004]本申请的主要目的为提供一种会议纪要的生成方法、装置、计算机设备和存储介质，旨在解决现有会议纪要需要人工整理，效率低、成本高的弊端。
[0005]为实现上述目的，本申请提供了一种会议纪要的生成方法，所述方法包括：
[0006]采集会议视频和会议音频，所述会议视频和所述会议音频的时序同步；
[0007]通过所述会议视频或所述会议音频识别所有参会人员的身份信息，并基于时序同步从所述会议音频中获取各所述参会人员的发言信息；
[0008]从各所述发言信息中挖掘出重点内容，并根据各所述发言信息、各所述重点内容和对应的所述身份信息结合生成所述会议纪要。
[0009]本申请还提供了一种会议纪要的生成装置，所述装置包括：
[0010]采集模块，用于采集会议视频和会议音频，所述会议视频和所述会议音频的时序同步；
[0011]识别模块，用于通过所述会议视频或所述会议音频识别所有参会人员的身份信息，并基于时序同步从所述会议音频中获取各所述参会人员的发言信息；
[0012]生成模块，用于从各所述发言信息中挖掘出重点内容，并根据各所述发言信息、各所述重点内容和对应的所述身份信息结合生成所述会议纪要。
[0013]本申请还提供一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器执行所述计算机程序时实现上述任一项所述方法的步骤。
[0014]本申请还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述的方法的步骤。
[0015]本申请中提供的一种会议纪要的生成方法、装置、计算机设备和存储介质，首先采集会议视频和会议音频，会议视频和会议音频的时序同步。然后通过会议视频和/或会议音频识别所有参会人员的身份信息，并基于时序同步从会议音频中获取各个参会人员的发言信息。最后从各个发言信息中挖掘出重点内容，并根据各个发言信息、各个重点内容和对应的身份信息结合生成会议纪要。本申请通过对会议视频和会议音频进行参会人员的身份信
息识别和重点内容挖掘，结合参会人员自身的所有发言信息，可以自动形成该次会议的会议纪要，不需要人工进行整理，方便快捷，能够有效提高企业的办公效率。
附图说明
[0016]图1是本申请一实施例中会议纪要的生成方法的步骤示意图；
[0017]图2是本申请一实施例中会议纪要的生成装置的整体结构框图；
[0018]图3是本申请一实施例的计算机设备的结构示意框图。
[0019]本申请目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
[0020]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
[0021]参照图1，本申请一实施例中提供了一种会议纪要的生成方法，所述方法包括步骤S1—S3：
[0022]S1:采集会议视频和会议音频，所述会议视频和所述会议音频的时序同步；
[0023]S2:通过所述会议视频或所述会议音频识别所有参会人员的身份信息，并基于时序同步从所述会议音频中获取各所述参会人员的发言信息；
[0024]S3:从各所述发言信息中挖掘出重点内容，并根据各所述发言信息、各所述重点内容和对应的所述身份信息结合生成所述会议纪要。
[0025]本实施例中，在会议举行过程中，全程会通过摄像设置和收音设备分别采集会议全过程的会议视频和会议音频，并且会议视频和会议音频的时序同步(即会议视频和会议音频同时开始、同时结束，每个时刻的会议视频和每个时刻的会议音频同步对应)。在会议结束后，会议全程的会议视频和会议音频传输到会议纪要的生成系统(下文简称生成系统)中进行保存，并由生成系统根据会议视频和会议记录整理出会议纪要。
[0026]生成系统可以通过会议视频识别出所有参会人员的身份信息；具体地，生成系统可以根据视频中参会人员发言时的拍摄视角切换，得到各个参会人员的发言时间段(比如参会人员A发言时，拍摄视角都在参会人员A身上；当参会人员A发言完毕，由参会人员B进行发言时，拍摄视角会切换到参会人员B的身上)，并根据各个参会人员的发言时间段对会议视频进行分割，从而得到各个参会人员各自对应的会议子视频。生成系统通过各个参会人员对应的会议子视频识别出参会人员的身份信息，每个参会人员的身份信息的识别步骤相同，本实施例以单个参会人员的身份信息的识别步骤为例进行说明。生成系统从参会人员对应的会议子视频中截取多个待选人脸图像，各个待选人脸图像具有不同的正脸展示角度。生成系统从各个待选人脸系统中选取正脸展示角度最大的一个待选人脸图像作为比对人脸图像，然后调取各个参会人员的基准人脸图像(比如证件照)，并将比对人脸图像分别与各个基准人脸图像做相似度计算，得到比对人脸图像与各个基准人脸图像之间各自对应的相似度。最后，生成系统选择最大相似度的基准人脸图像对应的参会人员信息(比如姓名，部门，职务等信息)，作为比对人脸图像的参会人员(即当前次被选中进行身份识别的参会人员)的身份信息。
[0027]生成系统也可以通过会议音频识别出所有参会人员的身份信息；具体地，生成系统根据音频中参会人员发言时的音色、声纹等特征的变化，得到各个参会人员的发言时间段，并根据各个参会人员的发言时间段对会议音频进行切换，从而得到各个参会人员各自对应的会议子音频。生成系统判断会议子音频中是否存在参会人员的自我介绍信，如果会议子音频中存在参会人员的自我介绍信息，则可以直接从参会人员的自我介绍信息中提取得到对应的身份信息。
[0028]生成系统基于时序同步从会议音频中获取得到各个参会人员的会议子音频(即参会人员的发言音频)，并通过语音—文本转换技术将各个参会人员的会议子音频转换为发言文本，从而得到参会人员的发言信息。生成系统调取若干个预设导向词，并根据这些预设导向词从参会人员的发言信息中提取若干个片段信息(单个片段信息对应单个预设导向词)。生成系统将各个片段信息按照各自在发言信息中的语序进行组装、拼接，从而得到参会人员在会议中发言的重点内容。生成系统根据各个参会人员各自对应的发言信息、重点内容以及身份进行进行关联对应，从而生成当前次会议的会议纪要。
[0029]本实施例中，生成本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种会议纪要的生成方法，其特征在于，所述方法包括：采集会议视频和会议音频，所述会议视频和所述会议音频的时序同步；通过所述会议视频或所述会议音频识别所有参会人员的身份信息，并基于时序同步从所述会议音频中获取各所述参会人员的发言信息；从各所述发言信息中挖掘出重点内容，并根据各所述发言信息、各所述重点内容和对应的所述身份信息结合生成所述会议纪要。2.根据权利要求1所述的会议纪要的生成方法，其特征在于，所述通过所述会议视频识别所有参会人员的身份信息的步骤中，单个所述参会人员的身份信息的识别步骤，包括：获取所述参会人员对应的会议子视频，并从所述会议子视频中截取多个待选人脸图像，各所述待选人脸图像具有不同的正脸展示角度；从各所述待选人脸图像中选取所述正脸展示角度最大的一个待选人脸图像作为比对人脸图像；调取各所述参会人员的基准人脸图像，并将所述比对人脸图像与各所述基准人脸图像分别做相似度计算，得到所述比对人脸图像与各所述基准人脸图像之间的相似度；选择最大相似度的所述基准人脸图像对应的参会人员信息，作为所述比对人脸图像对应的所述参会人员的所述身份信息。3.根据权利要求2所述的会议纪要的生成方法，其特征在于，所述获取所述参会人员对应的会议子视频的步骤之前，包括：根据各所述参会人员的发言时间段对所述会议视频进行分割，得到若干个所述会议子视频，单个所述会议子视频对应单个所述参会人员。4.根据权利要求2所述的会议纪要的生成方法，其特征在于，所述调取各所述参会人员的基准人脸图像，并将所述比对人脸图像与各所述基准人脸图像分别做相似度计算，得到所述比对人脸图像与各所述基准人脸图像之间的相似度的步骤之后，包括：若所述比对人脸图像与各所述基准人脸图像之间的相似度均小于相似度阈值，则将所述比对人脸图像对应的所述参会人员标注为外部人员；在所述会议纪要中，将所述外部人员对应的所述发言信息按照预设格式进行标注显示。5.根据权利要求1所述的会议纪要的生成方法，其特征在于，所述通过所述会议...

【专利技术属性】
技术研发人员：余刚盛，
申请(专利权)人：未鲲上海科技服务有限公司，
类型：发明
国别省市：