VR云平台交互方法及交互系统技术方案

本发明专利技术提供一种VR云平台交互方法及交互系统，根据视频帧组对VR交互视频的截取信息，得到互动子视频和互动时间段；响应固定配置信息，基于第一互动手势和第一预设时长对固定手势槽位配置，得到固定连贯手势；响应调节配置信息，基于第二互动手势和预设调节识别标签对调节手势槽位配置，得到动态调节手势；根据分类信息确定讲师设备和学员设备，对各互动子视频的固定连贯手势和/或动态调节手势挑选，得到讲师互动集合和学生互动集合；确定当前帧处于互动时间段，则采集讲师设备和学员设备处的手势图像得到讲师指令手势和学生指令手势，并确定讲师控制指令和学生控制指令，基于讲师控制指令和/或学生控制指令对VR交互视频进行控制。制。制。

【技术实现步骤摘要】
VR云平台交互方法及交互系统


[0001]本专利技术涉及数据处理技术，尤其涉及一种VR云平台交互方法及交互系统。

技术介绍

[0002]虚拟现实技术(缩写为VR)，又称虚拟实境或灵境技术，可以为用户展示360度的全景镜头，使用户身临其境，随着社会生产力和科学技术的不断发展，各行各业对VR技术的应用更为成熟，比如服务业中的旅游、教育等，可以为用户提供各类VR交互视频。
[0003]现有技术中，对用户播放VR交互视频时，用户可以借助手柄控制器、穿戴设备等对VR交互视频进行控制，当播放至视频中关键点时，讲师和用户可以对视频进行控制，在进行控制时需采用VR云平台预先设置的控制手势，但，无法实现针对VR交互视频中不同内容进行定制化设置，从而降低了用户体验。
[0004]因此，如何依据VR交互视频中不同的视频内容进行定制化手势，从而提升用户的体验感，成为亟待解决的问题。

技术实现思路

[0005]本专利技术实施例提供一种VR云平台交互方法及交互系统,可以依据VR交互视频中不同的视频内容进行定制化手势，从而提升用户的体验感。
[0006]本专利技术实施例的第一方面，提供一种VR云平台交互方法，包括：接收管理端对VR交互视频的选中信息，得到多组包括提示帧和截止帧的视频帧组，根据所述视频帧组对所述VR交互视频的截取信息，得到多个互动子视频以及所述互动子视频对应的互动时间段；响应管理端对各互动子视频的固定配置信息，调取多个固定手势槽位，基于图像采集装置连续采集所述管理端的多个第一互动手势，基于所述第一互动手势和第一预设时长对固定手势槽位进行配置，得到对应互动子视频的固定连贯手势；响应管理端对各互动子视频的调节配置信息，调取调节手势槽位，控制图像采集装置采集所述管理端的第二互动手势，基于所述第二互动手势和预设调节识别标签对调节手势槽位进行配置，得到对应互动子视频的动态调节手势；调取VR设备图发送给管理端，根据所述管理端的分类信息，确定讲师设备和学员设备，接收管理端对各互动子视频的固定连贯手势和/或动态调节手势的挑选信息，得到对应各互动子视频的讲师互动集合和学生互动集合，配置所述讲师互动集合至讲师设备，配置所述学生互动集合至学员设备；确定VR交互视频中当前帧处于互动时间段时，则控制图像采集装置采集讲师设备和学员设备处的手势图像，得到讲师指令手势和学生指令手势，根据讲师指令手势与讲师互动集合的对比，确定讲师控制指令，根据学生指令手势和学生互动集合的比对，确定学生控制指令，基于讲师控制指令和/或学生控制指令对VR交互视频进行控制。
[0007]可选地，在第一方面的一种可能实现方式中，所述基于图像采集装置连续采集所
述管理端的多个第一互动手势，基于所述第一互动手势和第一预设时长对固定手势槽位进行配置，得到对应互动子视频的固定连贯手势，包括：基于图像采集装置连续采集所述管理端的多个第一互动手势，将所述第一互动手势依次放置于固定手势槽位中，并将第一预设时长配置给所有的固定手势槽位，得到对应互动子视频的固定连贯手势。
[0008]可选地，在第一方面的一种可能实现方式中，所述根据讲师指令手势与讲师互动集合的对比，确定讲师控制指令，包括：在互动时间段实时检测到所述讲师指令手势时，将间隔第一预设时长后的第一个所述讲师指令手势作为讲师触发手势，并基于第一预设时长依次检测下一讲师指令手势作为中继讲师指令手势；根据所述讲师触发手势对所述讲师互动集合中的固定连贯手势和/或动态调节手势进行一次筛选，得到当前讲师互动集合；若所述讲师触发手势为第一互动手势时，根据所述讲师触发手势和多个中继讲师指令手势得到讲师手势集合，基于所述讲师手势集合和当前讲师互动集合，确定固定匹配手势，根据所述固定匹配手势得到讲师控制指令，其中，所述固定连贯手势与预设控制指令一一对应；若所述讲师触发手势为第二互动手势时，根据所述动态调节手势得到讲师控制指令。
[0009]可选地，在第一方面的一种可能实现方式中，所述若所述讲师触发手势为第二互动手势时，根据所述动态调节手势得到讲师控制指令，包括：若所述讲师触发手势对应第二互动手势，则获取相应的动态调节手势中调节手势槽位作为当前调节手势槽位，将所述当前调节手势槽位对应的预设调节识别标签作为当前调节识别标签；若当前调节识别标签的属性为角度类型，则调取角度控制策略控制图像采集装置采集预设判断时长内讲师设备处的讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令；若当前调节识别标签的属性为时长类型，则调取时长控制策略控制图像采集装置实时采集讲师设备处的多个讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令。
[0010]可选地，在第一方面的一种可能实现方式中，所述调取角度控制策略控制图像采集装置采集预设判断时长内讲师设备处的讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令，包括：将所述讲师触发手势对应的采集图像作为第一图像，并提取采集所述第一图像的第一时刻，根据所述第一时刻和预设判断时长，控制所述图像采集装置实时采集多个所述判断手势对应的采集图像作为第二图像；获取所述第一图像中所述讲师触发手势对应的第一角度值，以及多个所述第二图像中所述判断手势对应的第二角度值，根据所述第一角度值和多个所述第二角度值得到多个角度差值，将最大所述角度差值作为目标角度差值，并将所述目标角度差值对应的判断手势作为目标判断手势；
确定所述讲师触发手势和所述目标判断手势的相对位置，根据所述相对位置得到后退指令或前进指令，并基于所述目标角度差值确定指令时长；根据所述后退指令或前进指令和指令时长确定讲师控制指令。
[0011]可选地，在第一方面的一种可能实现方式中，所述获取所述第一图像中所述讲师触发手势对应的第一角度值，以及多个所述第二图像中所述判断手势对应的第二角度值，包括：对所述第一图像进行坐标化处理，提取所述第一图像中的所述讲师触发手势的第一手部轮廓的第一手部坐标集合，并获取所述讲师触发手势与所述第一图像下边缘的交点得到第一相交坐标集合；获取所述第一手部坐标集合的第一中心点坐标，以及所述第一相交坐标集合的第一中间点坐标，根据所述第一中心点坐标和所述第一中间点坐标得到第一斜率值，基于所述第一斜率值得到第一角度值；对多个所述第二图像进行坐标化处理，提取所述第二图像中的所述判断手势的第二手部轮廓的第二手部坐标集合，并获取所述判断手势与所述第二图像下边缘的交点得到第二相交坐标集合；获取所述第二手部坐标集合的第二中心点坐标，以及所述第二相交坐标集合的第二中间点坐标，根据所述第二中心点坐标和所述第二中间点坐标得到对应多个第二图像的第二斜率值，基于多个所述第二斜率值得到多个第二角度值。
[0012]可选地，在第一方面的一种可能实现方式中，所述获取所述第一手部坐标集合的第一中心点坐标，以及所述第一相交坐标集合的第一中间点坐标，包括：根据所述第一手部坐标集合中横坐标的最大值和最小值，得到第一中心点横坐标，根据所述第一手部坐标集合中纵坐标的最大值和最小值，得到第一中心点本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种VR云平台交互方法，其特征在于，包括：接收管理端对VR交互视频的选中信息，得到多组包括提示帧和截止帧的视频帧组，根据所述视频帧组对所述VR交互视频的截取信息，得到多个互动子视频以及所述互动子视频对应的互动时间段；响应管理端对各互动子视频的固定配置信息，调取多个固定手势槽位，基于图像采集装置连续采集所述管理端的多个第一互动手势，基于所述第一互动手势和第一预设时长对固定手势槽位进行配置，得到对应互动子视频的固定连贯手势；响应管理端对各互动子视频的调节配置信息，调取调节手势槽位，控制图像采集装置采集所述管理端的第二互动手势，基于所述第二互动手势和预设调节识别标签对调节手势槽位进行配置，得到对应互动子视频的动态调节手势；调取VR设备图发送给管理端，根据所述管理端的分类信息，确定讲师设备和学员设备，接收管理端对各互动子视频的固定连贯手势和/或动态调节手势的挑选信息，得到对应各互动子视频的讲师互动集合和学生互动集合，配置所述讲师互动集合至讲师设备，配置所述学生互动集合至学员设备；确定VR交互视频中当前帧处于互动时间段时，则控制图像采集装置采集讲师设备和学员设备处的手势图像，得到讲师指令手势和学生指令手势，根据讲师指令手势与讲师互动集合的对比，确定讲师控制指令，根据学生指令手势和学生互动集合的比对，确定学生控制指令，基于讲师控制指令和/或学生控制指令对VR交互视频进行控制。2.根据权利要求1所述的方法，其特征在于，所述基于图像采集装置连续采集所述管理端的多个第一互动手势，基于所述第一互动手势和第一预设时长对固定手势槽位进行配置，得到对应互动子视频的固定连贯手势，包括：基于图像采集装置连续采集所述管理端的多个第一互动手势，将所述第一互动手势依次放置于固定手势槽位中，并将第一预设时长配置给所有的固定手势槽位，得到对应互动子视频的固定连贯手势。3.根据权利要求2所述的方法，其特征在于，所述根据讲师指令手势与讲师互动集合的对比，确定讲师控制指令，包括：在互动时间段实时检测到所述讲师指令手势时，将间隔第一预设时长后的第一个所述讲师指令手势作为讲师触发手势，并基于第一预设时长依次检测下一讲师指令手势作为中继讲师指令手势；根据所述讲师触发手势对所述讲师互动集合中的固定连贯手势和/或动态调节手势进行一次筛选，得到当前讲师互动集合；若所述讲师触发手势为第一互动手势时，根据所述讲师触发手势和多个中继讲师指令手势得到讲师手势集合，基于所述讲师手势集合和当前讲师互动集合，确定固定匹配手势，根据所述固定匹配手势得到讲师控制指令，其中，所述固定连贯手势与预设控制指令一一对应；若所述讲师触发手势为第二互动手势时，根据所述动态调节手势得到讲师控制指令。4.根据权利要求3所述的方法，其特征在于，所述若所述讲师触发手势为第二互动手势时，根据所述动态调节手势得到讲师控制指
令，包括：若所述讲师触发手势对应第二互动手势，则获取相应的动态调节手势中调节手势槽位作为当前调节手势槽位，将所述当前调节手势槽位对应的预设调节识别标签作为当前调节识别标签；若当前调节识别标签的属性为角度类型，则调取角度控制策略控制图像采集装置采集预设判断时长内讲师设备处的讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令；若当前调节识别标签的属性为时长类型，则调取时长控制策略控制图像采集装置实时采集讲师设备处的多个讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令。5.根据权利要求4所述的方法，其特征在于，所述调取角度控制策略控制图像采集装置采集预设判断时长内讲师设备处的讲师指令手势作为判断手势，根据所述讲师触发手势和所述判断手势确定讲师控制指令，包括：将所述讲师触发手势对应的采集图像作为第一图像，并提取采集所述第一图像的第一时刻，根据所述第一时刻和预设判断时长，控制所述图像采集装置实时采集多个所述判断手势对应的采集图像作为第二图像；获取所述第一图像中所述讲师触发手势对应的第一角度值，以及多个所述第二图像中所述判断手势对应的第二角度值，根据所述第一角度值和多个所述第二角度值得到多个角度差值，将最大所述角度差值作为目标角度差值，并将所述目标角度差值对应的判断手势作为目标判断手势；确定所述讲师触发手势和所述目标判断手势的相对位置，根据所述相对位置得到后退指令或前进指令，并基于所述目标角度差值确定指令时长；根据所述后退指令或前进指令和指令时长确定讲师控制指令。6.根据权利要求5所述的方法，其特征在于，所述获取所述第一图像中所述讲师触发手势对应的第一角度值，以及多个所述第二图像中所述判断手势对应的第二角度值，包括：对所述第一图像进行坐标化处理，提取所述第一图像中的所述讲师触发手势的第一...

【专利技术属性】
技术研发人员：王磊，张继洲，闫京坤，
申请(专利权)人：超级芯江苏智能科技有限公司，
类型：发明
国别省市：