【技术实现步骤摘要】
本申请涉及视频处理，尤其是涉及一种视频互动方法、装置、设备及可读存储介质。
技术介绍
1、视频互动是用户在观看视频的过程所有互动操作的总称，通过互动可以给观众带来一种沉浸式的参与体验。当前，用户在观看视频过程中的互动方式可以总结为以下三种：1)、文字弹幕(这种弹幕互动方式较为常见)：用户通过屏幕下方的输入框输入文字内容，发表文字并显示在视频画面上方；2)、聊天室：聊天室也是常见的一种互动方式，主要应用于直播场景，在聊天室中用户可以发送文字、表情、动图等进行多种形式的互动；3)、图文弹幕(这种互动方式使用相对较少)：用户以弹幕的形式发表图像、表情等，显示在视频画面上方。
2、上述互动方式均可以作为用户之间的交流渠道，用户可以自由发表对视频的评价，但是，目前存在的互动方式均是用户之间的互动，缺少用户与视频内容之间的互动。
技术实现思路
1、本申请的目的在于提供一种视频互动方法、装置、设备及可读存储介质，从而解决现有技术中视频互动效果比较单一，缺少用户与视频内容进行互动的方式的问题。
2、第一方面，为了达到上述目的，本申请实施例提供一种视频互动方法，包括：
3、获取触发信号，所述触发信号在播放目标视频时产生，所述触发信号用于触发互动视频的展示；
4、响应于所述触发信号，获取与所述触发信号关联的内容生成意图信息；其中，所述内容生成意图信息与目标视频片段相关，所述目标视频片段包括获取所述触发信号时播放的视频内容；
5、根据所述内容生
6、展示所述互动视频。
7、可选地，所述触发信号在以下至少一种情况下产生：
8、所述目标视频播放至预设位置或预设时间；
9、用户输入指令信息。
10、可选地，所述获取与所述触发信号关联的内容生成意图信息之前，所述方法还包括：
11、在第一时刻或第二时刻，生成所述内容生成意图信息，其中，所述第一时刻为监测到所述目标视频播放到所述预设位置或所述预设时间的时刻，所述第二时刻为播放所述目标视频之前的时刻。
12、可选地，所述生成所述内容生成意图信息，包括：
13、确定所述目标视频片段中的音频数据对应的人物信息；
14、根据所述目标视频片段中的音频数据和/或图像数据，确定所述目标视频片段中的文本内容；
15、根据所述文本内容在所述目标视频片段中出现的时间或位置，以及所述音频数据对应的人物信息，确定所述文本内容对应的人物信息；
16、基于所述文本内容、所述文本内容对应的人物信息和所述目标视频片段，确定所述内容生成意图信息，其中，所述内容生成意图由三元组信息表示，所述三元组信息包括人物列表、生成场景和生成内容。
17、可选地，所述确定目标视频片段中的音频数据对应的人物信息，包括：
18、将所述目标视频片段中的音频数据划分为多个音频片段，其中，相邻的两个所述音频片段之间的重合度为第一数值；
19、在各所述音频片段中，提取音频原始特征信息；
20、根据所述音频原始特征信息，在各所述音频片段中，识别具有对话内容的第一目标音频片段；
21、在所述第一目标音频片段中，提取音频指纹特征，并根据音频指纹特征的相似性进行音频指纹特征分类；
22、根据预先存储的人物与音频指纹特征的对应关系，确定各类音频指纹特征对应的人物信息。
23、可选地，根据所述文本内容在所述目标视频片段中出现的时间或位置，以及所述音频数据对应的人物信息，确定所述文本内容对应的人物信息，包括：
24、根据所述文本内容在所述目标视频片段中出现的时间或位置，获取第二目标音频片段；
25、在所述第二目标音频片段的音频指纹特征中，获取与所述文本内容对应的目标音频指纹特征；
26、根据所述目标音频指纹特征对应的人物信息，确定所述文本内容对应的人物信息。
27、可选地，所述根据所述目标视频片段中的音频数据和/或图像数据，确定与所述目标视频片段对应的文本内容，包括以下任一项：
28、在所述目标视频片段中包括所述音频数据的情况下，采用语音识别算法，对所述音频数据进行识别，获取所述目标视频片段对应的文本内容；
29、在所述目标视频片段中包括所述音频数据和所述图像数据的情况下，对所述音频数据进行识别，获得与所述音频数据对应的第一文本内容，对所述图像数据进行识别，获得与所述图像数据对应的第二文本内容，利用所述第二文本内容对所述第一文本内容进行校验，并根据校验结果获得所述视频片段对应的文本内容。
30、可选地，所述基于所述文本内容、与所述文本内容对应的人物信息和所述目标视频片段，确定所述内容生成意图信息，包括：
31、基于所述文本内容和与所述文本内容对应的人物信息，利用自然语言处理算法，获取四元组信息，其中，所述四元组信息包括人物数量、人物名称、人物关系和人物情感；
32、根据所述目标视频片段中，与所述文本内容对应的图像数据，确定生成场景；
33、根据所述四元组信息，确定人物列表和生成内容；
34、根据所述生成场景、所述人物列表和所述生成内容，确定所述内容生成意图信息。
35、可选地，获取与所述触发信号关联的内容生成意图信息，包括：
36、获取用户输入的指令信息中的人物信息、生成场景和生成内容；
37、根据人物列表、所述生成场景和所述生成内容，生成所述内容生成意图信息，其中，所述人物列表包括从所述用户输入的指令信息中获取到的所述人物信息。
38、可选地，所述根据所述内容生成意图信息，获取互动视频之前，所述方法还包括：
39、在所述目标视频片段中，获取与所述内容生成意图中的人物列表对应的人物素材；
40、根据所述人物素材、所述内容生成意图信息中的生成场景和生成内容，合成所述互动视频。
41、可选地，，所述方法还包括：
42、确定所述目标视频中的各个人物在所述目标视频的各图像数据中的位置信息；
43、利用人物身份识别算法，识别所述目标视频中的各个人物的人物身份；
44、根据所述目标视频的角色表，确定各个所述人物身份对应的角色名称；
45、所述在所述目标视频片段中，获取与所述内容生成意图中的人物列表对应的人物素材，包括：
46、根据所述位置信息、所述人物身份和所述人物身份对应的角色名称，获取所述人物列表对应的人物素材。
47、第二方面，为了达到上述目的，本申请实施例提供一种视频互动装置，包括：
48、第一获取模块，用于获取触发信号，所述触发信号在播放目标视频时产生，所述触发信号用于触发互动视频的展示；
49、第二获取模块，用于响本文档来自技高网...
【技术保护点】
1.一种视频互动方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述触发信号在以下至少一种情况下产生：
3.根据权利要求2所述的方法，其特征在于，所述获取与所述触发信号关联的内容生成意图信息之前，所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述生成所述内容生成意图信息，包括：
5.根据权利要求4所述的方法，其特征在于，所述基于所述文本内容、与所述文本内容对应的人物信息和所述目标视频片段，确定所述内容生成意图信息，包括：
6.根据权利要求2所述的方法，其特征在于，获取与所述触发信号关联的内容生成意图信息，包括：
7.根据权利要求1所述的方法，其特征在于，所述根据所述内容生成意图信息，获取互动视频之前，所述方法还包括：
8.一种视频互动装置，其特征在于，包括：
9.一种视频互动设备，其特征在于，包括：收发机、处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序，所述程序被所述处理器执行时实现如权利要求1至7中任一项所述的视频互动方法。
<...【技术特征摘要】
1.一种视频互动方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，所述触发信号在以下至少一种情况下产生：
3.根据权利要求2所述的方法，其特征在于，所述获取与所述触发信号关联的内容生成意图信息之前，所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述生成所述内容生成意图信息，包括：
5.根据权利要求4所述的方法，其特征在于，所述基于所述文本内容、与所述文本内容对应的人物信息和所述目标视频片段，确定所述内容生成意图信息，包括：
6.根据权利要求2所述的方法，其特征在于，获取与...
【专利技术属性】
技术研发人员：程星星，
申请(专利权)人：咪咕文化科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。