视频交互方法、装置、设备及计算机存储介质制造方法及图纸

技术编号:39141983 阅读:16 留言:0更新日期:2023-10-23 14:55
本申请公开了一种视频交互方法、装置、设备及计算机存储介质。该方法应用于服务器,包括:向终端发送第一视频帧;接收第一信息,所述第一信息包括所述终端发送的第一坐标和所述第一视频帧的视频渲染参数信息,所述第一坐标为用户对所述第一视频帧的触控坐标;根据所述第一信息,确定所述第一坐标对应的目标操作指令;根据所述目标操作指令,向所述终端发送第二视频帧。根据本申请实施例,能够有效提升视频交互中触控坐标的准确性,实现服务器基于触控坐标向终端设备所传输的视频帧的准确性。控坐标向终端设备所传输的视频帧的准确性。控坐标向终端设备所传输的视频帧的准确性。

【技术实现步骤摘要】
视频交互方法、装置、设备及计算机存储介质


[0001]本申请属于通信
,尤其涉及一种视频交互方法、装置、设备及计算机存储介质。

技术介绍

[0002]目前在以视频为媒介的交互领域中,例如如沉浸式视频购物、云游戏之类的应用,其通常使用的交互方式基本流程为:首先基于应用程序的控制协议,通过互联网建立云端服务器与用户终端的音视频传输通道;基于此,服务器将业务内容、游戏效果等在云端服务器进行渲染,渲染后的视频内容通过建立的互联网音视频传输通道发送至用户终端;用户终端上的应用程序实时获取鼠标、键盘、触控屏、手柄等指令输入终端设备的操作指令,通过互联网音视频传输通道回传给云服务器;服务器根据用户的操作指令,进行相应的视频内容刷新。
[0003]在上述用户终端与云端服务器的视频交互过程中,用户终端多为移动设备,用户在终端的交互方式通常以触屏为主。在用户通过触屏点击或者滑动等操作输入对当前视频帧的操作指令时,通常需要对用户的触控坐标进行校准,然而,目前通过触控屏获取手势坐标的校正一般只会在触控屏硬件的初步获取层面进行,在视频内容场景复杂等场景下,本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频交互方法,其特征在于,应用于服务器,所述方法包括:向终端发送第一视频帧;接收第一信息,所述第一信息包括所述终端发送的第一坐标和所述第一视频帧的视频渲染参数信息,所述第一坐标为用户对所述第一视频帧的触控坐标;根据所述第一信息,确定所述第一坐标对应的目标操作指令;根据所述目标操作指令,向所述终端发送第二视频帧。2.根据权利要求1所述的方法,其特征在于,所述根据所述第一信息,确定所述第一坐标对应的目标操作指令,包括:根据所述第一视频帧的视频渲染参数信息,渲染目标界面,所述目标界面与所述第一视频帧在所述终端的显示界面匹配;将所述第一坐标映射至所述目标界面,得到所述目标界面中的校准坐标;将所述校准坐标对应的操作指令确定为所述第一坐标对应的目标操作指令。3.根据权利要求1所述的方法,其特征在于,所述根据所述第一视频帧的视频渲染参数信息,渲染目标界面,包括:根据所述第一视频帧的视频渲染参数信息,通过双线性插值法或者三线性插值法渲染所述目标界面。4.根据权利要求1所述的方法,其特征在于,在所述根据所述第一信息,确定所述第一坐标对应的目标操作指令之前,所述方法还包括:接收所述终端发送的所述终端的屏幕参数信息;所述根据所述第一信息,确定所述第一坐标对应的目标操作指令,包括:根据所述第一信息和所述终端的屏幕参数信息,确定所述第一坐标对应的目标操作指令。5.根据权利要求1

4任一项所述的方法,其特征在于,所述第一信息中还包括所述第一视频帧的帧序号;所述向终端发送第一视频帧,包括:在对所述第一视频帧进行视频编码时,将所述第一视频帧的帧序号添加至所述第一视频帧的补充增强信息;向所述终端发送所述编码后的第一视频帧和所述补充增强信息。6.一种视频交互方法,其特征在于,应用于终端,所述方法包括:显示接收到的由服务器发送的第一视频帧;在所述终端显示有所述第一视频帧的情况下,获取用户的第一信息,所述第一信息包括第一坐标和所述第一视频帧的视频渲染参数信息,所述第一坐标为所述用户对所述第一视频帧的触控坐标;向所述服务器发送所述第一信息,以使所述服务器基于所述第一信息向所述终端...

【专利技术属性】
技术研发人员:王文敏李胜辉程明杨森轲刘朱颂
申请(专利权)人:中国移动通信集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1