System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种交互式视频播放方法、装置、设备及存储介质制造方法及图纸_技高网

一种交互式视频播放方法、装置、设备及存储介质制造方法及图纸

技术编号:41391512 阅读:6 留言:0更新日期:2024-05-20 19:14
本发明专利技术公开了一种交互式视频播放方法、装置、设备及存储介质,基于用户在视频播放过程中发起的提问请求,获取当前播放视频的时间线和故事线;其中,所述时间线和所述故事线是根据当前播放视频剧情相关的关联视频确定;根据所述时间线和所述故事线,确定针对所述提问请求的答复数据;在当前视频播放界面展示所述答复数据;本发明专利技术利用具有剧情关联性的多个视频的时间线和故事线,获取用户所需的针对性回答内容,提高用户观看视频时的交互体验,满足用户真实的交互需求。

【技术实现步骤摘要】

本专利技术涉及音视频,尤其涉及一种交互式视频播放方法、装置、设备及存储介质


技术介绍

1、随着技术的发展和人们需求的增加,越来越多的视频被传播和观看。目前,用户观看视频的交互方式主要是通过与视频相关的简单问答实现,具体通过视频的介绍信息(如标题信息、标签信息)、图片进行对象识别,识别出对应的实体对象和事件对象,结合目标对象的介绍信息或搜索数据,生成对应的问题信息,基于该问题信息,通过现有的对话模型输出包含文本、图片、音频、视频等不同形式的媒体内容。例如用户在应用主界面输入关键词进行视频的搜索,当搜索到具有与用户输入的关键词匹配的视频标题或描述的视频时,将搜索到的视频推送到应用主界面,完成视频交互的问答。

2、但是,现有的视频观看交互方案,问题的答案依赖对话模型,其输出的问题答案较为固定,且答案仅局限于单个视频,无法对用户提出的问题做出针对性的回答,无法满足用户真实的交互需求,交互体验差。


技术实现思路

1、针对现有技术存在的问题,本专利技术实施例提供一种交互式视频播放方法、装置、设备及存储介质,其利用具有剧情关联性的多个视频的时间线和故事线,获取用户所需的针对性回答内容,提高用户观看视频时的交互体验,满足用户真实的交互需求。

2、第一方面,本专利技术实施例提供了一种交互式视频播放方法,包括:

3、响应于用户在视频播放过程中发起的提问请求,获取当前播放视频的时间线和故事线;其中,所述时间线和所述故事线是根据当前播放视频剧情相关的关联视频确定;p>

4、根据所述时间线和所述故事线,确定针对所述提问请求的答复数据;

5、在当前视频播放界面展示所述答复数据。

6、作为上述方案的改进,所述时间线和所述故事线的确定包括以下步骤:

7、获取与当前播放视频剧情相关的至少一个关联视频;

8、对至少一个所述关联视频进行多模态信息提取,得到相应关联视频的剧集信息;

9、根据所述剧集信息,生成当前播放视频的时间线和故事线。

10、作为上述方案的改进,所述对至少一个所述关联视频进行多模态信息提取,得到相应关联视频的剧集信息,包括:

11、针对每个所述关联视频,对所述关联视频进行视频拆分,获得相应关联视频的多个镜头片段;

12、从每个所述镜头片段中提取出关键帧信息和弹幕信息;

13、对每个所述镜头片段进行视频理解,得到对应镜头片段的关键信息;

14、根据各个所述镜头片段的关键帧信息、弹幕信息和关键信息,得到相应镜头片段的镜头信息;

15、根据所述关键帧信息、所述弹幕信息和所述镜头信息,得到相应关联视频的剧集信息。

16、作为上述方案的改进,所述根据所述时间线和所述故事线,确定针对所述提问请求的答复数据,包括:

17、将所述提问请求分别与所述时间线、所述故事线进行匹配检索,从所述时间线和/或所述故事线上定位出用于解答所述提问请求的镜头信息;

18、根据定位出的镜头信息,得到所述答复数据。

19、作为上述方案的改进,所述根据定位出的镜头信息,得到所述答复数据,包括:

20、将定位出的镜头信息对应的镜头片段进行整合,生成视频片段;

21、根据定位出的镜头信息和所述视频片段,得到所述答复数据。

22、作为上述方案的改进,所述在当前视频播放界面展示所述答复数据,包括:

23、当定位出的镜头信息属于当前播放视频时,对当前播放视频的时间轴对应所述镜头信息的镜头片段进行标识,并将所述视频片段以悬浮窗口形式在当前视频播放界面展示;

24、当定位出的镜头信息不属于当前播放视频时,获取定位出的镜头信息所属的关联视频,并对相应关联视频的时间轴对应所述镜头信息的镜头片段进行标识,将标识有镜头片段的关联视频和所述视频片段以悬浮窗口形式在当前视频播放界面展示。

25、作为上述方案的改进,采用以下方式获取用户发起的提问请求:

26、通过当前视频播放界面上展示的悬浮窗口获取用户输入的问题信息,并根据所述问题信息,生成提问请求;

27、或者,响应于用户对当前视频播放界面显示的弹幕信息的选定操作,生成对应弹幕信息的提问请求。

28、第二方面,本专利技术实施例提供了一种交互式视频播放装置,包括:

29、信息获取模块,用于响应于用户在视频播放过程中发起的提问请求,获取当前播放视频的时间线和故事线;其中,所述时间线和所述故事线是根据当前播放视频剧情相关的关联视频确定;

30、答复数据确定模块,用于根据所述时间线和所述故事线,确定针对所述提问请求的答复数据;

31、答复数据展示模块,用于在当前视频播放界面展示所述答复数据。

32、第三方面,本专利技术实施例提供了一种交互式视频播放设备,包括:处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面中任意一项所述的交互式视频播放方法。

33、第四方面,本专利技术实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如第一方面中任意一项所述的交互式视频播放方法。

34、相对于现有技术,本专利技术提供的一种交互式视频播放方法、装置、设备及存储介质,基于用户在视频播放过程中发起的提问请求,获取当前播放视频的时间线和故事线;其中,所述时间线和所述故事线是根据当前播放视频剧情相关的关联视频确定;根据所述时间线和所述故事线,确定针对所述提问请求的答复数据;在当前视频播放界面展示所述答复数据,从而可以利用具有剧情关联性的多个连更视频生成时间线和故事线,将多个视频关联成一个整体,并基于梳理的时间线和故事线生成贴合连更视频故事内容的回答,从而可以有效获取用户所需的针对性回答内容,实现实时互动的观看,提高用户观看视频时的交互体验,满足用户真实的交互需求。

本文档来自技高网...

【技术保护点】

1.一种交互式视频播放方法,其特征在于,包括:

2.如权利要求1所述的交互式视频播放方法,其特征在于,所述时间线和所述故事线的确定包括以下步骤:

3.如权利要求2所述的交互式视频播放方法,其特征在于,所述对至少一个所述关联视频进行多模态信息提取,得到相应关联视频的剧集信息,包括:

4.如权利要求1所述的交互式视频播放方法,其特征在于,所述根据所述时间线和所述故事线,确定针对所述提问请求的答复数据,包括:

5.如权利要求4所述的交互式视频播放方法,其特征在于,所述根据定位出的镜头信息,得到所述答复数据,包括:

6.如权利要求4或5所述的交互式视频播放方法,其特征在于,所述在当前视频播放界面展示所述答复数据,包括:

7.如权利要求1所述的交互式视频播放方法,其特征在于,采用以下方式获取用户发起的提问请求:

8.一种交互式视频播放装置,其特征在于,包括:

9.一种交互式视频播放设备,其特征在于,包括:处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7中任意一项所述的交互式视频播放方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,其中,在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行如权利要求1至7中任意一项所述的交互式视频播放方法。

...

【技术特征摘要】

1.一种交互式视频播放方法,其特征在于,包括:

2.如权利要求1所述的交互式视频播放方法,其特征在于,所述时间线和所述故事线的确定包括以下步骤:

3.如权利要求2所述的交互式视频播放方法,其特征在于,所述对至少一个所述关联视频进行多模态信息提取,得到相应关联视频的剧集信息,包括:

4.如权利要求1所述的交互式视频播放方法,其特征在于,所述根据所述时间线和所述故事线,确定针对所述提问请求的答复数据,包括:

5.如权利要求4所述的交互式视频播放方法,其特征在于,所述根据定位出的镜头信息,得到所述答复数据,包括:

6.如权利要求4或5所述的交互式视频播放方法,其特征在于,所述在当...

【专利技术属性】
技术研发人员:周晓晓
申请(专利权)人:咪咕文化科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1