显示设备、视频通话方法及服务器技术

本申请实施例提供了一种显示设备、视频通话方法及服务器，显示设备包括：摄像头，用于采集第一深度图像；显示器；分别与显示器及摄像头连接的控制器，控制器被配置为：响应于接收到用户输入的用于指示混合通话的控制信号，向被叫端发送混合通话请求；根据接收到被叫端的确认信号，向服务器发送第一深度图像；根据接收到来自服务器的混合图像，控制显示器显示第一混合图像，其中，第一混合图像包括服务器根据第二人物的深度信息，将第二人物渲染到第一深度图像中得到的深度图像，第二人物为第二深度图像中的人物，第二深度图像为被叫端采集的深度图像。本申请解决了视频通话的双方分别处于不同的背景的问题，提升了用户体验。

【技术实现步骤摘要】
显示设备、视频通话方法及服务器
本申请涉及显示设备
，尤其涉及一种显示设备、视频通话方法及服务器。
技术介绍
在当前快节奏的生活方式下，朋友、家人见面的机会逐渐变少，越来越多地感情联络依托视频通话来进行。目前，具有摄像头的移动设备可通过安装视频通话应用程序实现视频通话，然而，移动设备的显示屏较小，且移动设备通常为手持，导致用户只能看到通话对方人物的头像，通话体验不佳。智能电视通过增加摄像头组件，使得基于电视的视频通话成为可能。智能电视的显示屏较大，且用户与智能电视通常会保持一定距离，使得用户可看到通话对方的更多信息，但是，目前用户在智能电视上看到的视频通话界面，双方人物仍然处在两个不同的窗口中，无法破除通话双方屏幕硬边界限制，通话体验仍有待改善。
技术实现思路
为解决上述技术问题，本申请提供了一种显示设备、视频通话方法及服务器。第一方面，本申请提供了一种显示设备，该显示设备包括：摄像头，用于采集第一深度图像；显示器，用于显示用户界面，及在所述用户界面中显示用于指示在用户界面中项目被选择的选择器；分别与所述显示器及摄像头连接的控制器，所述控制器被配置为：响应于接收到用户输入的用于指示混合通话的控制信号，向被叫端发送混合通话请求；根据接收到所述被叫端的确认信号，向服务器发送所述第一深度图像；根据接收到来自所述服务器的混合图像，控制所述显示器显示所述第一混合图像，其中，所述第一混合图像包括所述服务器根据第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中得到的深度图像，所述第二人物为第二深度图像中的人物，所述第二深度图像为所述被叫端采集的深度图像。在一些实施例中，所述控制器还被配置为：响应于接收到用户输入的用于指示切换背景的控制信号，向所述服务器发送切换背景请求；根据接收到来自所述服务器的第二混合图像，控制所述显示器将所述第一混合图像切换为第二混合图像，或控制所述显示器将所述第一混合图像切换为第二混合图像，其中，所述第二混合图像包括所述服务器根据第一人物的深度信息，将所述第一人物渲染到第二深度图像中得到的深度图像，所述第一人物为所述第一深度图像中的人物。第二方面，本申请实施例提供了一种显示设备，该显示设备包括：摄像头，用于采集第二深度图像；显示器，用于显示用户界面，及在所述用户界面中显示用于指示在用户界面中项目被选择的选择器；分别与所述显示器及摄像头连接的控制器，所述控制器被配置为：响应于接收到主叫端的混合通话请求，控制所述显示器显示请求混合通话的第二提示信息；响应于接收到用户输入的对应所述第二提示信息控制信号，向服务器发送确认信号；根据接收到所述服务器的人物深度图像请求，从所述第二深度图像提取出第二人物的深度信息，向所述服务器发送所述第二人物的深度信息；根据接收到来自所述服务器的第一混合图像，控制所述显示器显示所述第一混合图像，其中，所述第一混合图像包括所述服务器根据所述第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中得到的深度图像，所述第一深度图像为所述主叫端采集的深度图像。在一些实施例中，所述控制器还被配置为：向所述服务器发送所述第二深度图像，使所述服务器根据第一人物的深度信息，将所述第一人物渲染到所述第二深度图像中得到第二混合图像，所述第一人物为第一深度图像中的人物，所述第一深度图像为所述主叫端采集的深度图像。第三方面，本申请实施例提供了一种视频通话方法，该视频通话方法包括：将主叫端的混合通话请求发送到被叫端；根据接收到被叫端的确认信号，获取所述主叫端采集的第一深度图像；获取所述被叫端的第二人物的深度信息；根据所述第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中，得到第一混合图像；向所述主叫端和被叫端分别发送所述第一混合图像。第四方面，本申请实施例提供了一种服务器，该服务器被配置为：将主叫端的混合通话请求发送到被叫端；根据接收到被叫端的确认信号，获取所述主叫端采集的第一深度图像；获取所述被叫端的第二人物的深度信息；根据所述第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中，得到第一混合图像；向所述主叫端和被叫端分别发送所述第一混合图像。本申请提供的显示设备、视频通话方法及服务器的有益效果包括：本申请实施例通过3D摄像头模组采集通话双方的深度信息，根据通话双方的深度信息将其中一方的人物渲染到另一方的深度图像中，实现了通话双方在同一真实背景下的实时显示，解决了通话界面上的双方人物处于不同背景的问题，提升了用户的视频通话体验。附图说明为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1中示例性示出了根据一些实施例的显示设备与控制装置之间操作场景的示意图；图2中示例性示出了根据一些实施例的显示设备200的硬件配置框图；图3中示例性示出了根据一些实施例的控制装置100的硬件配置框图；图4中示例性示出了根据一些实施例的显示设备200中软件配置示意图；图5中示例性示出了根据一些实施例的显示设备200中应用程序的图标控件界面显示示意图；图6中示例性示出了根据一些实施例的AR混合通话示意图；图7中示例性示出了根据一些实施例的混合通话交互示意图；图8中示例性示出了根据一些实施例的视频通话界面示意图；图9中示例性示出了根据一些实施例的混合通话界面示意图；图10中示例性示出了根据另一些实施例的混合通话界面示意图；图11中示例性示出了根据一些实施例的视频通话方法的流程示意图。具体实施方式为使本申请的目的、实施方式和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请描述的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请所附权利要求保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明(Unlessotherwiseindicated)。应该理解这样使用的用语在适当情况下可以互换，例如能够根据本本文档来自技高网...

【技术保护点】
1.一种显示设备，其特征在于，包括：/n摄像头，用于采集第一深度图像；/n显示器，用于显示用户界面，及在所述用户界面中显示用于指示在用户界面中项目被选择的选择器；/n分别与所述显示器及摄像头连接的控制器，所述控制器被配置为：/n响应于接收到用户输入的用于指示混合通话的控制信号，向被叫端发送混合通话请求；/n根据接收到所述被叫端的确认信号，向服务器发送所述第一深度图像；/n根据接收到来自所述服务器的混合图像，控制所述显示器显示所述第一混合图像，其中，所述第一混合图像包括所述服务器根据第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中得到的深度图像，所述第二人物为第二深度图像中的人物，所述第二深度图像为所述被叫端采集的深度图像。/n

【技术特征摘要】
1.一种显示设备，其特征在于，包括：
摄像头，用于采集第一深度图像；
显示器，用于显示用户界面，及在所述用户界面中显示用于指示在用户界面中项目被选择的选择器；
分别与所述显示器及摄像头连接的控制器，所述控制器被配置为：
响应于接收到用户输入的用于指示混合通话的控制信号，向被叫端发送混合通话请求；
根据接收到所述被叫端的确认信号，向服务器发送所述第一深度图像；
根据接收到来自所述服务器的混合图像，控制所述显示器显示所述第一混合图像，其中，所述第一混合图像包括所述服务器根据第二人物的深度信息，将所述第二人物渲染到所述第一深度图像中得到的深度图像，所述第二人物为第二深度图像中的人物，所述第二深度图像为所述被叫端采集的深度图像。


2.根据权利要求1所述的显示设备，其特征在于，所述控制器还被配置为：
响应于接收到用户输入的用于指示切换背景的控制信号，向所述服务器发送切换背景请求；
根据接收到来自所述服务器的第二混合图像，控制所述显示器将所述第一混合图像切换为第二混合图像，或控制所述显示器将所述第一混合图像切换为第二混合图像，其中，所述第二混合图像包括所述服务器根据第一人物的深度信息，将所述第一人物渲染到第二深度图像中得到的深度图像，所述第一人物为所述第一深度图像中的人物。


3.根据权利要求1所述的显示设备，其特征在于，所述响应于接收到用户输入的用于指示混合通话的控制信号，之前还包括：
与被叫端建立视频通话连接；
控制显示器在视频通话的用户界面上显示混合通话控件，其中，所述混合通话控件响应于触发时生成所述指示混合通话的控制信号。


4.根据权利要求1所述的显示设备，其特征在于，所述向服务器发送所述第一深度图像，之前还包括：
控制所述显示器显示确认混合通话的第一提示信息；
接收用户输入的对应所述第一提示信息的控制信号。


5.一种显示设备，其特征在于，包括：
摄像头，用于采集第二深度图像；
显示器，用于显示用户界面，及在所述用户界面中显示用于指示在用户界面中项目被选择的选择器；
分别与所述显示器及摄像头连接的控制器，所述控制器被配置为：
响应于接收到主叫端的混合通话请求，控制所述显示器显示请求混合通话的第二提示信息；
响应于接收到用户输入的对应所述第二提示信息...

【专利技术属性】
技术研发人员：王大勇，王卫明，吴超，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：山东;37