一种基于人机交互的控制方法、装置、设备及存储介质制造方法及图纸

技术编号:28430588 阅读:35 留言:0更新日期:2021-05-11 18:40
本发明专利技术实施例公开了一种基于人机交互的控制方法、装置、设备及存储介质。其中,该方法包括:根据采集到的屏幕前的至少两帧的候选视频帧,确定所述候选视频帧中是否存在起始帧;其中,所述至少两帧的候选视频帧为连续的视频帧;若存在,则采集所述起始帧后至少两帧的视频帧作为判断帧,获取所述判断帧中目标部位的姿态信息;其中,所述姿态信息包括位置坐标和朝向角度;根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视频进行播放。实现了通过获取屏幕前人体的动作对屏幕中的视频进行播放控制,减少用户操作,通过确定起始帧和判断帧,提高了基于人机交互的控制精度和控制效率。

【技术实现步骤摘要】
一种基于人机交互的控制方法、装置、设备及存储介质
本专利技术实施例涉及视频播放技术,尤其涉及一种基于人机交互的控制方法、装置、设备及存储介质。
技术介绍
随着人们娱乐活动的丰富,用户在观看视频时,追求对视频中各个对象的动作进行自主控制以及对声音的控制。现有技术中,人们与可视化界面之间的人机交互形式单一,用户只能对目标视频进行简单的控制,趣味性和视频控制效率较低,影响用户的体验效果。
技术实现思路
本专利技术实施例提供一种基于人机交互的控制方法、装置、设备及存储介质,以提高人机交互的效率和趣味性。第一方面,本专利技术实施例提供了一种基于人机交互的控制方法,该方法包括:根据采集到的屏幕前的至少两帧的候选视频帧,确定所述候选视频帧中是否存在起始帧;其中,所述至少两帧的候选视频帧为连续的视频帧;若存在,则采集所述起始帧后至少两帧的视频帧作为判断帧,获取所述判断帧中目标部位的姿态信息;其中,所述姿态信息包括位置坐标和朝向角度;根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视本文档来自技高网...

【技术保护点】
1.一种基于人机交互的控制方法,其特征在于,包括:/n根据采集到的屏幕前的至少两帧的候选视频帧,确定所述候选视频帧中是否存在起始帧;其中,所述至少两帧的候选视频帧为连续的视频帧;/n若存在,则采集所述起始帧后至少两帧的视频帧作为判断帧,获取所述判断帧中目标部位的姿态信息;其中,所述姿态信息包括位置坐标和朝向角度;/n根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视频进行播放。/n

【技术特征摘要】
1.一种基于人机交互的控制方法,其特征在于,包括:
根据采集到的屏幕前的至少两帧的候选视频帧,确定所述候选视频帧中是否存在起始帧;其中,所述至少两帧的候选视频帧为连续的视频帧;
若存在,则采集所述起始帧后至少两帧的视频帧作为判断帧,获取所述判断帧中目标部位的姿态信息;其中,所述姿态信息包括位置坐标和朝向角度;
根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视频进行播放。


2.根据权利要求1所述的方法,其特征在于,根据采集到的屏幕前的至少两帧的候选视频帧,确定所述候选视频帧中是否存在起始帧,包括:
将获取的屏幕前的至少两帧的视频帧作为候选视频帧;
根据预设的图片整体判定规则,确定所述候选视频帧中的是否存在目标对象;
若存在,则根据预设的图片识别模型为所述候选视频帧的图片内容进行评分;
根据评分结果,判断所述候选视频帧中是否存在起始帧。


3.根据权利要求2所述的方法,其特征在于,根据预设的图片识别模型为所述候选视频帧的图片内容进行评分,包括:
根据预设的人脸识别模型,确定连续时间的至少两帧的候选视频帧中的目标对象是否为同一个人;
若是,则根据预设的姿势识别模型确定所述候选视频帧中目标部位的姿势评分。


4.根据权利要求2所述的方法,其特征在于,根据评分结果,判断所述候选视频帧中是否存在起始帧,包括:
将所述候选视频帧的评分结果与预设的评分阈值进行比较;
若所述候选视频帧的评分结果大于所述评分阈值,则确定所述候选视频帧为起始帧。


5.根据权利要求1所述的方法,其特征在于,根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视频进行播放,包括:
根据至少两帧判断帧中目标部位的位置坐标和所述判断帧的获取时间,确定目标部位的运动速度;
根据预设的视频播放规则和目标部位的运动速度,确定目标视频中声音或动态图像的播放速度。


6.根据权利要求1所述的方法,其特征在于,根据所述判断帧中目标部位的姿态信息,基于预设的视频播放规则,控制目标视频进行播放,还包括:
根据预设帧中目标部位的位置坐标,确定目标部位在所述预设帧中的高度位置;其中,所述预设帧为所述判断帧中的视频帧;
根据所述目标部位的高度位置和预设的音量控制规则,确定所述目标视频的播放音量。


7.根据权利要求1所述的方法,其特征在于,所述目...

【专利技术属性】
技术研发人员:杨上超王轶丹崔宁
申请(专利权)人:深圳市优必选科技股份有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1