全景视频数据处理方法及系统技术方案

本申请实施例提供一种全景视频数据处理方法及系统，通过确定全景视频交互平台所映射的目标视频交互意图，基于目标视频交互意图从目标全景视频交互数据中提取候选视频帧片段行为特征，获取目标视频交互意图对应的第一目标帧片段行为特征序列，在第一目标帧片段行为特征序列中存在与候选视频帧片段行为特征匹配的目标帧片段行为特征时，基于目标帧片段行为特征确定视频交互推送元素，否则判定候选视频帧片段行为特征在第二目标帧片段行为特征序列中所对应的行为特征层级为候选行为特征层级，通过逐层级的进行帧片段行为特征匹配，可以扩展视频交互推送元素的范围，提高后续视频交互推送的内容丰富度。频交互推送的内容丰富度。频交互推送的内容丰富度。

【技术实现步骤摘要】
全景视频数据处理方法及系统


[0001]本申请涉及视频交互
，具体而言，涉及一种全景视频数据处理方法及系统。

技术介绍

[0002]全景视频是一种用3D摄像机进行全方位360度进行拍摄的视频，用户在观看视频的时候，可以随意调节视频上下左右进行观看。在相关技术中，也衍生出了用户与全景视频进行虚拟交互的场景，从而可以实现用户在接近于体验真实场景下的视频交互意图。在交互过程中，需要结合用户交互的具体行为特征向用户提供相关的视频交互推送元素以便于提高全局视频交互场景的内容特征量。然而，相关技术中在挖掘视频交互推送元素时其最终确定的范围较小，无法较好地保证后续视频交互推送的内容丰富度。

技术实现思路

[0003]有鉴于此，本申请的目的在于提供一种全景视频数据处理方法及系统。
[0004]依据本申请的第一方面，提供一种全景视频数据处理方法，应用于云服务器，所述方法包括：获取采集于全景视频交互平台的目标全景视频交互数据，并确定所述全景视频交互平台所映射的目标视频交互意图；基于所述目标视频交互意图从所述目标全景视频交互数据中提取候选视频帧片段行为特征；获取所述目标视频交互意图对应的第一目标帧片段行为特征序列；判断所述第一目标帧片段行为特征序列中是否存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征；如果所述第一目标帧片段行为特征序列中存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征，则基于所述目标帧片段行为特征确定视频交互推送元素；所述第一目标帧片段行为特征序列中不存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征，则判定所述候选视频帧片段行为特征在第二目标帧片段行为特征序列中所对应的行为特征层级为候选行为特征层级，基于所述候选行为特征层级逐层进行帧片段行为特征匹配，直至确定目标帧片段行为特征，并基于所述目标帧片段行为特征确定所述视频交互推送元素，所述目标帧片段行为特征为所述第二目标帧片段行为特征序列中与所述第一目标帧片段行为特征序列中的帧片段行为特征匹配的帧片段行为特征，所述第二目标帧片段行为特征序列对应所有视频交互意图，且包括多个行为特征层级，每个行为特征层级中包括一个或多个帧片段行为特征，相邻行为特征层级之间的关系为非线性递归关系图中的前向递归成员与后向递归成员之间的关系；向所述全景视频交互平台推送所述视频交互推送元素所对应的交互渲染流。
[0005]在第一方面的一种可能的实施方式中，所述目标视频交互意图为目标电商下单交
互意图，所述基于所述候选行为特征层级逐层进行帧片段行为特征匹配，直至确定目标帧片段行为特征，包括：确定所述候选视频帧片段行为特征对应的目标电商商品属性；确定所述候选行为特征层级为当前行为特征层级；基于所述目标电商商品属性从所述当前行为特征层级包括的所有帧片段行为特征中获取候选视频帧片段行为特征子集，所述候选视频帧片段行为特征子集中包括的帧片段行为特征对应的电商商品属性均为所述目标电商商品属性；判断所述第一目标帧片段行为特征序列中是否存在与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征；如果所述第一目标帧片段行为特征序列中不存在与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征，则判定所述当前行为特征层级的后向行为特征层级为所述当前行为特征层级，直至确定目标帧片段行为特征。
[0006]在第一方面的一种可能的实施方式中，所述方法还包括：确定所述当前行为特征层级是否包括后向行为特征层级；如果所述当前行为特征层级包括后向行为特征层级，则判定所述当前行为特征层级的后向行为特征层级为所述当前行为特征层级；如果所述当前行为特征层级不包括后向行为特征层级，则判定所述候选行为特征层级的前向行为特征层级为所述当前行为特征层级，并在未在所述当前行为特征层级中确定所述目标帧片段行为特征时，判定在所述目标电商下单交互意图下不存在所述候选视频帧片段行为特征对应的电商商品。
[0007]在第一方面的一种可能的实施方式中，所述方法还包括：在所述第一目标帧片段行为特征序列中存在多个与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征时，判断是否包括用户在所述目标电商下单交互意图下的过往下单操作特征；如果包括用户在所述目标电商下单交互意图下的过往下单操作特征，则基于所述过往下单操作特征分别对多个目标帧片段行为特征进行置信度评估，确定所述置信度评估最大的目标帧片段行为特征为用于确定所述目标全景视频交互数据对应的代表性交互行为的帧片段行为特征；如果不包括用户在所述目标电商下单交互意图下的过往下单操作特征，则分别确定多个目标帧片段行为特征对应的视频交互元素的交互参与度，确定所述交互参与度最大的视频交互元素为所述视频交互推送元素。
[0008]在第一方面的一种可能的实施方式中，所述方法还包括：在所述候选视频帧片段行为特征包括多个时，所述确定目标帧片段行为特征，包括：分别确定每个候选视频帧片段行为特征在所述第二目标帧片段行为特征序列中所对应的行为特征层级为所述候选行为特征层级；基于每个候选视频帧片段行为特征对应的候选行为特征层级逐层进行帧片段行为特征匹配，获得每个候选视频帧片段行为特征对应的一个或多个拟定候选视频帧片段行为特征；
从每个候选视频帧片段行为特征对应的一个或多个拟定候选视频帧片段行为特征中选择一个拟定候选视频帧片段行为特征进行组合，获得多个帧片段行为特征簇；获取所述目标电商下单交互意图下的下单行为关注特征；基于所述下单行为关注特征确定所述多个帧片段行为特征簇中每个帧片段行为特征簇的簇置信度；确定所述簇置信度最大的帧片段行为特征簇中包括的拟定候选视频帧片段行为特征为所述目标帧片段行为特征。
[0009]在第一方面的一种可能的实施方式中，所述基于所述下单行为关注特征确定所述多个帧片段行为特征簇中每个帧片段行为特征簇的簇置信度，包括：判断是否存在目标帧片段行为特征簇，所述目标帧片段行为特征簇为所述多个帧片段行为特征簇中与所述下单行为关注特征中的视频交互元素元素内容特征匹配的帧片段行为特征簇；如果存在目标帧片段行为特征簇，则判定所述目标帧片段行为特征簇对应的簇置信度为最大置信度；如果存在目标帧片段行为特征簇，则基于所述每个帧片段行为特征簇中包括的多个拟定候选视频帧片段行为特征确定所述每个帧片段行为特征簇的可关联度，基于所述可关联度确定所述每个帧片段行为特征簇的簇置信度。
[0010]在第一方面的一种可能的实施方式中，所述基于所述每个帧片段行为特征簇中包括的多个拟定候选视频帧片段行为特征确定所述每个帧片段行为特征簇的可关联度，包括：确定帧片段行为特征簇中包括的多个拟定候选视频帧片段行为特征对应的电商商品之间存在电商商品相偏离的帧片段行为特征簇为不可关联簇，不存在电商商品相偏离的帧片段行为特征簇为可关联簇；所述基于所述可关联度确定所述每个帧片段行为特征簇的簇置信度，包括：确定所述不可关联簇的簇置信度为最低置信度；确定每个可关联簇中包括的多个拟定候选视频帧片段行为特征的相关性参数值，所述相关性参数值表征本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种全景视频数据处理方法，其特征在于，应用于云服务器，所述方法包括：获取采集于全景视频交互平台的目标全景视频交互数据，并确定所述全景视频交互平台所映射的目标视频交互意图；基于所述目标视频交互意图从所述目标全景视频交互数据中提取候选视频帧片段行为特征；获取所述目标视频交互意图对应的第一目标帧片段行为特征序列；判断所述第一目标帧片段行为特征序列中是否存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征；如果所述第一目标帧片段行为特征序列中存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征，则基于所述目标帧片段行为特征确定视频交互推送元素；所述第一目标帧片段行为特征序列中不存在与所述候选视频帧片段行为特征匹配的目标帧片段行为特征，则判定所述候选视频帧片段行为特征在第二目标帧片段行为特征序列中所对应的行为特征层级为候选行为特征层级，基于所述候选行为特征层级逐层进行帧片段行为特征匹配，直至确定目标帧片段行为特征，并基于所述目标帧片段行为特征确定所述视频交互推送元素，所述目标帧片段行为特征为所述第二目标帧片段行为特征序列中与所述第一目标帧片段行为特征序列中的帧片段行为特征匹配的帧片段行为特征，所述第二目标帧片段行为特征序列对应所有视频交互意图，且包括多个行为特征层级，每个行为特征层级中包括一个或多个帧片段行为特征，相邻行为特征层级之间的关系为非线性递归关系图中的前向递归成员与后向递归成员之间的关系；向所述全景视频交互平台推送所述视频交互推送元素所对应的交互渲染流。2.根据权利要求1所述的全景视频数据处理方法，其特征在于，所述目标视频交互意图为目标电商下单交互意图，所述基于所述候选行为特征层级逐层进行帧片段行为特征匹配，直至确定目标帧片段行为特征，包括：确定所述候选视频帧片段行为特征对应的目标电商商品属性；确定所述候选行为特征层级为当前行为特征层级；基于所述目标电商商品属性从所述当前行为特征层级包括的所有帧片段行为特征中获取候选视频帧片段行为特征子集，所述候选视频帧片段行为特征子集中包括的帧片段行为特征对应的电商商品属性均为所述目标电商商品属性；判断所述第一目标帧片段行为特征序列中是否存在与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征；如果所述第一目标帧片段行为特征序列中不存在与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征，则判定所述当前行为特征层级的后向行为特征层级为所述当前行为特征层级，直至确定目标帧片段行为特征。3.根据权利要求2所述的全景视频数据处理方法，其特征在于，所述方法还包括：确定所述当前行为特征层级是否包括后向行为特征层级；如果所述当前行为特征层级包括后向行为特征层级，则判定所述当前行为特征层级的后向行为特征层级为所述当前行为特征层级；如果所述当前行为特征层级不包括后向行为特征层级，则判定所述候选行为特征层级的前向行为特征层级为所述当前行为特征层级，并在未在所述当前行为特征层级中确定所
述目标帧片段行为特征时，判定在所述目标电商下单交互意图下不存在所述候选视频帧片段行为特征对应的电商商品。4.根据权利要求2所述的全景视频数据处理方法，其特征在于，所述方法还包括：在所述第一目标帧片段行为特征序列中存在多个与所述候选视频帧片段行为特征子集中的帧片段行为特征匹配的目标帧片段行为特征时，判断是否包括用户在所述目标电商下单交互意图下的过往下单操作特征；如果包括用户在所述目标电商下单交互意图下的过往下单操作特征，则基于所述过往下单操作特征分别对多个目标帧片段行为特征进行置信度评估，确定所述置信度评估最大的目标帧片段行为特征为用于确定所述目标全景视频交互数据对应的代表性交互行为的帧片段行为特征；如果不包括用户在所述目标电商下单交互意图下的过往下单操作特征，则分别确定多个目标帧片段行为特征对应的视频交互元素的交互参与度，确定所述交互参与度最大的视频交互元素为所述视频交互推送元素。5.根据权利要求2
‑
4中任意一项所述的全景视频数据处理方法，其特征在于，所述方法还包括：在所述候选视频帧片段行为特征包括多个时，所述确定目标帧片段行为特征，包括：分别确定每个候选视频帧片段行为特征在所述第二目标帧片段行为特征序列中所对应的行为特征层级为所述候选行为特征层级；基于每个候选视频帧...

【专利技术属性】
技术研发人员：宛汝国，秦华军，邓湛波，
申请(专利权)人：苏州国之威文化科技有限公司广州国威数字文化科技有限公司，
类型：发明
国别省市：