【技术实现步骤摘要】
本申请涉及人工智能，尤其涉及一种会议重点内容提取方法、装置及电子设备。
技术介绍
1、用户在会议过程，总是需要记录一些会议中的重点内容。但是随着信息技术的发展和电子设备的普及，各种借助通信技术和电子设备的远程会议或现场会议的数量日益增加，会议的进程节奏也得以极大程度地加快，这就使得参会人员会后很难回顾会中的重要信息。
2、参会人员在会中记录会议内容的方式一般是，主观理解一些会议重点内容并手动记录到笔记本上或移动电子设备中，这种方式在节奏快、内容密集的会议中，很难完整、准确地记录会议重点内容。对此，有一些辅助设备应运而生，如录音笔、或具有录屏功能的电子设备，基于这些设备可以采集音频或视频，而后可以通过人工智能技术从中提取一些文字信息或会议重点片段，但提取结果均不理想。
3、因此，目前的相关技术均不能准确地提取会议重点内容。
技术实现思路
1、本申请提供了一种会议重点内容提取方法、装置及电子设备、计算机存储介质及计算机程序产品，能够更为准确地提取会议中参会人员需要的重点内容。
2、第一方面，本申请提供一种会议重点内容提取方法，该方法包括：获取会议信息，会议信息包括记录有参会人员行为的第一视频和会议内容信息，该第一视频和会议内容信息均具有时间属性；从第一视频中确定记录有参会人员第一行为的目标图像帧，第一行为是表征关注会议内容的行为；根据第一视频中目标图像帧的时间属性，确定会议重点时段；根据会议内容信息的时间属性，从会议内容信息中提取出对应会议重点时段的
3、在本申请实施例中，获取的会议信息可以是在会议过程中拍摄的参会人员行为的第一视频(本文中也称为“行为记录视频”)，以及会议内容信息(如会议中录制的音频、会议中的显示设备上的录屏视频、截屏图片等等)，这些第一视频和会议内容信息附有对应会议进程的时间属性，例如会议进行30分钟，第一视频和会议内容信息也均具有对应这30分钟的时间属性。这样，当从第一视频中识别出有部分图像帧(即目标图像帧)记录了参会人员做出关注会议的行为(即第一行为，如记笔记、敲键盘)时，可以认为这些目标图像帧对应的时段里的会议内容是参会人员关注、想要得到的会议重点内容。故而，本实施例中，从这部分内容从整场会议的全部会议内容信息中提取出来，提供给用户(可以是参会人员)，使得用户可以得到备受参会人员关注的会议重点，会议重点提取结果更准确，高效，更能够满足用户的实际需求，也更利于提高人员的工作效率。
4、在一些可能的实施方式中，第一视频的数量为n个，n个第一视频分别对应n个会场，n≥2；该方法还包括：从n个第一视频中确定与目标会场对应的目标第一视频，目标会场为n个会场之一；从目标第一视频中，确定记录有目标会场中的参会人员的第一行为的第一目标图像帧；根据目标第一视频中第一目标图像帧的时间属性，确定目标会场对应的会议重点时段；根据会议内容信息的时间属性，从会议内容信息中提取出对应目标会场的会议重点时段的会议内容，生成对应目标会场的会议重点内容信息。
5、在本实施方式中，当多个会场共同举行一场会议时，整场会议的会议内容信息可以是相同的，但是各个会场关注的会议重点可能不同。因此，可以将任意一个会场作为目标会场进行单独的行为记录视频分析，确定该目标会场中参会人员关注会议的重点会议时段。这样，从整场会议的会议内容信息中提取出专属于目标会场的重点会议时段的内容，也即该目标会场的参会人员关注的会议重点内容，满足用户个性化的需求。
6、在一些可能的实施方式中，从第一视频中，确定记录有参会人员第一行为的目标图像帧，包括：对第一视频进行行为检测，确定第一视频中记录有参会人员第一行为的多个候选图像帧；根据多个候选图像帧，确定目标图像帧。
7、本实施方式中，对记录参会人员行为的第一视频进行行为检测，可以确定第一视频中哪些图像帧记录了参会人员关注会议的行为，并且，也可以进一步确定第一视频中哪些图像帧记录了参会人员不关注会议的行为。这样，筛选出记录了参会人员关注会议的行为的图像帧作为候选图像帧以进行分析，利于快速确定会议重点时段。
8、在一些可能的实施方式中，根据多个候选图像帧，确定目标图像帧，包括：对多个候选图像帧中的任意一个第一候选图像帧，若确定第一候选图像帧中第一行为的参会人员的数量大于第二行为的参会人员的数量，则将第一候选图像帧确定为目标图像帧；其中，第二行为是表征未关注会议内容的行为。
9、本实施方式中，一场会议过程中，任意时段都可能存在部分参会人员关注会议，同时还有部分人员不关注会议，故而，当视频的任意图像帧中，做出关注会议行为的人数大于做出不关注会议行为(即第二行为，如玩手机)的人数时，就可以认为这些图像帧(即第一候选图像帧)对应时段的会议内容是大部分参会人员都关注的重点内容。这样，将这些图像帧作为目标图像帧用于确定会议重点时段，以进行后续重点内容提取，利于得到更为准确的提取结果。
10、在一些可能的实施方式中，根据第一视频进行行为检测，确定第一视频中记录有参会人员第一行为的多个候选图像帧，具体包括：从第一视频中，获取图像帧序列，图像帧序列包括g帧连续的图像帧，g≥2；以第一姿势为目标，对图像帧序列中各帧图像帧按照排列顺序依次进行目标检测，确定记录有参会人员第一姿势的图像帧；当确定图像帧序列中第g帧记录有参会人员第一姿势时，对第g帧之后的图像帧进行目标跟踪，确定第g帧之后的图像帧中记录的参会人员第一姿势的运动轨迹，1≤g＜g；在根据运动轨迹，确定第g帧至第g+n帧图像帧中记录的参会人员第一姿势形成第一行为时，将第g帧至第g+n帧图像帧确定为候选图像帧，n≥1，g+n≤g。这样，通过目标检测和目标跟踪等人工智能化的行为检测方式，利于快速得到准确的检测结果，提高效率。
11、在一些可能的实施方式中，根据会议内容信息的时间属性，从会议内容信息中提取出对应会议重点时段的会议内容，生成会议重点内容信息，包括：当会议内容信息中包括会议录屏内容的第二视频时，根据第二视频的时间属性，从第二视频中截取对应会议重点时段的视频片段；提取视频片段中画面内容不同的图像帧，生成对应的图片；根据图片，生成会议重点内容信息。
12、这样，通过对重点时段的录屏视频(即第二视频)截取和内容识别，就可以高效得到包括图片形式的会议重点内容，利于得到多模态、信息更为完整的重点内容信息。
13、在一些可能的实施方式中，根据会议内容信息的时间属性，从会议内容信息中提取出对应会议重点时段的会议内容，生成会议重点内容信息，包括：当会议内容信息中包括音频时，从音频中截取对应会议重点时段的音频片段，生成会议重点内容信息。
14、这样，通过对重点时段的音频截取，就可以高效得到包括音频形式的会议重点内容，利于得到多模态、信息更为完整的重点内容信息。
15、在一些可能的实施方式中，从音频中截取对应会议重点时段的音频片段，生成会议重点内容信息，包括：从音频片段的音频本文档来自技高网...
【技术保护点】
1.一种会议重点内容提取方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述第一视频的数量为N个，所述N个第一视频分别对应N个会场，N≥2；
3.根据权利要求1或2所述的方法，其特征在于，所述从所述第一视频中，确定记录有所述参会人员第一行为的目标图像帧，包括：
4.根据权利要求3所述的方法，其特征在于，所述根据所述多个候选图像帧，确定所述目标图像帧，包括：
5.根据权利要求1-4任一所述的方法，其特征在于，所述根据所述第一视频进行行为检测，确定所述第一视频中记录有所述参会人员第一行为的多个候选图像帧，具体包括：
6.根据权利要求1-5任一所述的方法，其特征在于，所述根据所述会议内容信息的时间属性，从所述会议内容信息中提取出对应所述会议重点时段的会议内容，生成会议重点内容信息，包括：
7.根据权利要求1-5任一所述的方法，其特征在于，所述根据所述会议内容信息的时间属性，从所述会议内容信息中提取出对应所述会议重点时段的会议内容，生成会议重点内容信息，包括：
8.根据权利要求
9.根据权利要求1-5任一所述的方法，其特征在于，所述根据所述会议内容信息的时间属性，从所述会议内容信息中提取出对应所述会议重点时段的会议内容，生成会议重点内容信息，包括：
10.根据权利要求1-5任一所述的方法，其特征在于，在所述生成会议重点内容信息之前，所述方法还包括：
11.一种会议重点内容提取装置，其特征在于，所述装置包括：
12.根据权利要求11所述的装置，其特征在于，所述第一视频的数量为N个，所述N个第一视频分别对应N个会场中，N≥2；
13.根据权利要求11或12所述的装置，其特征在于，所述处理模块具体用于：
14.根据权利要求13所述的装置，其特征在于，所述处理模块具体用于：
15.根据权利要求11-14任一所述的装置，其特征在于，所述处理模块具体用于：
16.一种电子设备，其特征在于，包括：
17.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，当所述计算机程序在处理器上运行时，使得所述处理器执行如权利要求1-10任一所述的方法。
18.一种计算机程序产品，其特征在于，当所述计算机程序产品在处理器上运行时，使得所述处理器执行如权利要求1-10任一所述的方法。
19.一种芯片，其特征在于，包括至少一个处理器和接口；
...【技术特征摘要】
1.一种会议重点内容提取方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述第一视频的数量为n个，所述n个第一视频分别对应n个会场，n≥2；
3.根据权利要求1或2所述的方法，其特征在于，所述从所述第一视频中，确定记录有所述参会人员第一行为的目标图像帧，包括：
4.根据权利要求3所述的方法，其特征在于，所述根据所述多个候选图像帧，确定所述目标图像帧，包括：
5.根据权利要求1-4任一所述的方法，其特征在于，所述根据所述第一视频进行行为检测，确定所述第一视频中记录有所述参会人员第一行为的多个候选图像帧，具体包括：
6.根据权利要求1-5任一所述的方法，其特征在于，所述根据所述会议内容信息的时间属性，从所述会议内容信息中提取出对应所述会议重点时段的会议内容，生成会议重点内容信息，包括：
7.根据权利要求1-5任一所述的方法，其特征在于，所述根据所述会议内容信息的时间属性，从所述会议内容信息中提取出对应所述会议重点时段的会议内容，生成会议重点内容信息，包括：
8.根据权利要求7所述的方法，其特征在于，所述从所述音频中截取对应所述会议重点时段的音频片段，生成会议重点内容信息，包括：
9.根据权利要求1-5任一所述的方...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。