一种社交关系识别方法、电子设备、介质以及产品技术

本申请公开了一种社交关系识别方法、电子设备、介质以及产品，涉及计算机技术领域，通过构建帧级别、片段级别和视频级别这三种级别对应的异构图以及处理得到对应的特征，实现对视频的处理，对应于时序聚合的多个帧和片段信息的关系图推理，在构建异构图过程中，考虑到越较长时间的视频级别的特征汇总，避免出现目标人物随着时间关系变化的社交关系改变导致推理精度降低。因此，本申请可以解决视频较长时的人物关系随发展变化的推理精度降低、人物不出现同一帧的隐含关系遗漏的技术问题，达到视频级别的人物关系以及隐含关系的识别，实现多层次信息的人物关系推理，提高推理精度的技术效果。

【技术实现步骤摘要】

本申请涉及计算机，尤其涉及一种社交关系识别方法、电子设备、介质以及产品。

技术介绍

1、视频人物社交关系推理是基于视频的同一帧下通过出现的人物之间的简单交互动作来推断。对于不同帧出现的不同人物，如第一帧出现人物a和人物b，第二帧出现人物b和人物c，可以推断出每帧下的两个人物的社交关系。人物b和人物c虽没有在同一帧出现，但是均和人物a存在一定社交关系，对应于这种社交关系的推理性遗漏，且人物社交关系会随着时间发展和其他帧出现其发生变化，进一步降低了人物社交关系的推理精度。

2、因此，如何提高社交关系的推理精度是本领域技术人员亟需要解决的技术问题。

技术实现思路

1、本申请提供了一种社交关系识别方法、电子设备、介质以及产品，以至少解决相关技术中社交关系推理遗漏以降低推理精度的问题。

2、本申请提供了一种社交关系识别方法，包括：

3、获取多个帧的视频数据；并构建帧异构图，以根据多个帧的视频数据和帧异构图确定多个片段级特征；

4、构建片段异构图，并根据多个片段级特征和片段本文档来自技高网...

【技术保护点】

1.一种社交关系识别方法，其特征在于，包括：

2.根据权利要求1所述的社交关系识别方法，其特征在于，构建帧异构图，以根据多个帧的视频数据和帧异构图确定多个片段级特征，包括：

3.根据权利要求2所述的社交关系识别方法，其特征在于，对帧人物节点的视频数据进行场景图节点初始化处理得到初始化后的帧人物节点，包括：

4.根据权利要求2所述的社交关系识别方法，其特征在于，对帧物体节点的视频数据进行场景图节点初始化处理对应得到初始化后的帧物体节点，包括：

5.根据权利要求2所述的社交关系识别方法，其特征在于，将多个帧级特征进行节点聚合处理，以确定多个片段...

【技术特征摘要】

1.一种社交关系识别方法，其特征在于，包括：

2.根据权利要求1所述的社交关系识别方法，其特征在于，构建帧异构图，以根据多个帧的视频数据和帧异构图确定多个片段级特征，包括：

3.根据权利要求2所述的社交关系识别方法，其特征在于，对帧人物节点的视频数据进行场景图节点初始化处理得到初始化后的帧人物节点，包括：

4.根据权利要求2所述的社交关系识别方法，其特征在于，对帧物体节点的视频数据进行场景图节点初始化处理对应得到初始化后的帧物体节点，包括：

5.根据权利要求2所述的社交关系识别方法，其特征在于，将多个帧级特征进行节点聚合处理，以确定多个片段级特征，包括：

6.根据权利要求5所述的社交关系识别方法，其特征在于，按照多帧的时间维度和同一个帧级特征对多个帧级特征进行聚合确定同一个帧级特征对应的片段级特征，包括：

7.根据权利要求1所述的社交关系识别方法，其特征在于，构建片段异构图，并根据多个片段级特征和片段异构图确定多个视频级特征，包括：

8.根据权利要求7所述的社交关系识别方法，其特征在于，对段字幕节点的视频数据进行段...

【专利技术属性】
技术研发人员：徐聪，刘璐，张润泽，王立，王丽，曹征征，
申请(专利权)人：山东海量信息技术研究院，
类型：发明
国别省市：