头戴设备和三维视频通话系统技术方案

技术编号:15011454 阅读:122 留言:0更新日期:2017-04-04 16:26
本实用新型专利技术公开了一种头戴设备和三维视频通话系统。所述头戴设备包括:视频采集单元、音频采集单元、音视频编码单元、中央处理单元、音视频解码单元、视频输出单元和音频输出单元;视频采集单元包括两组摄像头,两组摄像头按照人眼两个瞳孔间的距离同步拍摄同一场景得到不同角度的左、右眼图像数据;音频采集单元同步拾取音频数据,经由音视频编码单元编码后,由中央处理单元将音视频数据发送给对端,中央处理单元接收对端发送的音视频数据,解码后将左、右眼图像数据发送给视频输出单元进行3D视频显示,以及将音频数据发送给音频输出单元进行音频输出,从而实现实时的3D视频通话,互相分享自己观看到景象。

【技术实现步骤摘要】

本技术涉及信号处理
,特别涉及一种头戴设备和三维视频通话系统
技术介绍
近年来,随着移动宽带网络速度的升级,各种视频应用软件不断出现,其中远距离通信装置被广泛的使用。远距离通信装置的基本原理是:通过一端的摄像头和麦克风采集数据,经过网络发送模块发送数据,在另一端设备上显示图像和播放声音。但是,这类型的远距离通信装置只是平面展示,并不能够完美的呈现出发送端所看到的景象。
技术实现思路
鉴于上述问题,本技术提供了一种头戴设备和三维视频通话系统,以解决现有技术视频通话智能平面展示的问题。为达到上述目的,本技术的技术方案是这样实现的:一方面,本技术提供了一种头戴设备,包括:视频采集单元、音频采集单元、音视频编码单元、中央处理单元、音视频解码单元、视频输出单元和音频输出单元;所述视频采集单元包括两组摄像头,所述两组摄像头按照人眼两个瞳孔间的距离同步拍摄同一场景,得到不同角度的左、右眼图像数据;所述音频采集单元包括至少一麦克风,用于同步拾取音频数据;所述音视频编码单元,用于接收所述视频采集单元采集的左、右眼图像数据,和所述音频采集单元同步拾取的音频数据,并将所述左、右眼图像数据和所述音频数据数据编码成音视频数据发送给所述中央处理单元;所述中央处理单元,用于接收所述音视频编码单元发送的音视频数据,并将该音视频数据发送给对端;以及用于接收对端发送的音视频数据,并将该对端发送的音视频数据发送给所述音视频解码单元;所述音视频解码单元,用于将对端发送的音视频数据解码成相应的左、右眼图像数据和音频数据,并将解码后的左、右眼图像数据发送给所述视频输出单元进行3D视频显示,以及将解码后的音频数据发送给所述音频输出单元进行音频输出。优选地,所述视频输出单元包括用于接收左眼图像的左显示屏和用于接收右眼图像的右显示屏,所述左显示屏靠近人眼的一侧设置有左光学系统,所述右显示屏靠近人眼一侧设置有右光学系统,所述左、右光学系统,用于使人的左眼和右眼在透过相应的光学系统看到左显示屏和右显示屏时,合成具有三维效果的立体图像。进一步优选地,所述头戴设备还包括光学系统控制旋钮;所述光学系统控制旋钮,用于调节所述左、右光学系统所形成的虚拟屏幕与人眼的距离,控制人眼观看到的显示内容的显示比例。优选地,所述头戴设备还包括摄像头距离调节旋钮,所述摄像头距离调节旋钮用于微调所述两组摄像头之间的水平距离。优选地,所述头戴设备还包括摄像头角度调节旋钮,所述摄像头角度调节旋钮用于调节每组摄像头的角度。优选地,所述头戴设备还包括音视频切换单元;所述音视频切换单元,用于根据用户指令将所述中央处理单元向所述音视频解码单元发送的音视频数据切换成本端采集到的音视频数据或者恢复成对端发送的音视频数据。优选地,所述音频采集单元包括两个或两个以上的麦克风;所述中央处理单元,还用于将所述两个或两个以上的麦克风拾取到的音频数据进行立体声处理。另一方面,本技术提供了一种三维视频通话系统,该三维视频通话系统包括:网络服务器、至少两个上述技术方案提供的头戴设备;任两个所述的头戴设备通过所述网络服务器建立连接,并通过所述网络服务器实现三维视频通话。本技术实施例的有益效果是:本技术模拟人眼观察景物的过程,在具有3D显示功能的头戴设备中设置双摄像头,利用双摄像头采集具有左、右眼视差的左、右眼的图像数据,以及利用头戴设备的音频采集单元同步拾取音频数据,并将该左、右眼的图像数据和同步拾取的音频数据编码后发送给对端头戴设备进行3D显示,同时接收对端发送的音视频数据,解码后将获得的左、右眼图像数据发送给本端的视频输出单元进行3D视频显示,将获得的音频数据发送给本端的音频输出单元进行音频输出,从而实现双方用户实时的3D视频通话,互相分享自己观看到景象。附图说明图1为本技术实施例一提供的头戴设备的组成结构示意图;图2为本技术实施例二提供的三维视频通话系统的组成结构示意图。具体实施方式为使本技术的目的、技术方案和优点更加清楚,下面将结合附图对本技术实施方式作进一步地详细描述。由于人的两眼之间大约有6cm的水平距离,所以在观察前方物体时,两只眼睛看到的景象必然有角度的不同,这个差别使得大脑能够自动形成上下、左右、前后的区别,从而产生立体视觉。本技术模拟人眼观察景物的过程,在具有3D显示功能的头戴设备中设置双摄像头,利用双摄像头采集具有左右眼视差的图像数据,将图像数据发送给头戴设备的视频输出单元进行3D显示。实施例一:图1为本实施例提供的头戴设备的组成结构示意图,图1中的头戴设备包括:视频采集单元10、音频采集单元11、音视频编码单元12、中央处理单元13、音视频解码单元14、视频输出单元15和音频输出单元16。视频采集单元10包括两组摄像头,两组摄像头按照人眼两个瞳孔间的距离同步拍摄同一场景,得到不同角度的左、右眼图像数据。音频采集单元11包括至少一麦克风,用于同步拾取音频数据。音视频编码单元12,用于接收视频采集单元10采集的左、右眼图像数据,和音频采集单元11同步拾取的音频数据,并将左、右眼图像数据和音频数据数据编码成音视频数据发送给中央处理单元13。中央处理单元13,用于接收音视频编码单元12发送的音视频数据,并将该音视频数据发送给对端;以及用于接收对端发送的音视频数据,并将该端发送的音视频数据发送给音视频解码单元14。具体的,中央处理单元13包括网络传输模块,利用网络传输模块将音视频编码单元12发送的音视频数据发送给对端,以及利用网络传输模块接收对端发送的编码的音视频数据。音视频解码单元14,用于将对端发送的音视频数据解码成相应的左、右眼图像数据和音频数据,并将解码后的左、右眼图像数据发送给视频输出单元15进行3D视频显示,以及将解码后的音频数据发送给音频输出单元16进行音频输出。本实施例在头戴设备中设置具有双摄像头的视频采集单元,通过将双摄像头采集的图像数据和音频采集单元同步采集的音频数据通过网络传输给对端,实现双方实时的3D视频通话,即互相分享自己观看到景象。在本实施例的一个具体实现方案中,视频输出单元15包括用于接收左眼图像的左显示屏和用于接收右眼图像的右显示屏,左显示屏靠近人眼的一侧设置有左光学系统,右显示屏靠近人眼一侧设置有右光学系统,左、右光学本文档来自技高网...

【技术保护点】
一种头戴设备,其特征在于,包括:视频采集单元、音频采集单元、音视频编码单元、中央处理单元、音视频解码单元、视频输出单元和音频输出单元;所述视频采集单元包括两组摄像头,所述两组摄像头按照人眼两个瞳孔间的距离同步拍摄同一场景,得到不同角度的左、右眼图像数据;所述音频采集单元包括至少一麦克风,用于同步拾取音频数据;所述音视频编码单元,用于接收所述视频采集单元采集的左、右眼图像数据,和所述音频采集单元同步拾取的音频数据,并将所述左、右眼图像数据和所述音频数据编码成音视频数据发送给所述中央处理单元;所述中央处理单元,用于接收所述音视频编码单元发送的音视频数据,并将该音视频数据发送给对端;以及用于接收对端发送的音视频数据,并将该对端发送的音视频数据发送给所述音视频解码单元;所述音视频解码单元,用于将对端发送的音视频数据解码成相应的左、右眼图像数据和音频数据,并将解码后的左、右眼图像数据发送给所述视频输出单元进行3D视频显示,以及将解码后的音频数据发送给所述音频输出单元进行音频输出。

【技术特征摘要】
1.一种头戴设备,其特征在于,包括:视频采集单元、音频采集单元、
音视频编码单元、中央处理单元、音视频解码单元、视频输出单元和音频输
出单元;
所述视频采集单元包括两组摄像头,所述两组摄像头按照人眼两个瞳孔
间的距离同步拍摄同一场景,得到不同角度的左、右眼图像数据;
所述音频采集单元包括至少一麦克风,用于同步拾取音频数据;
所述音视频编码单元,用于接收所述视频采集单元采集的左、右眼图像
数据,和所述音频采集单元同步拾取的音频数据,并将所述左、右眼图像数
据和所述音频数据编码成音视频数据发送给所述中央处理单元;
所述中央处理单元,用于接收所述音视频编码单元发送的音视频数据,
并将该音视频数据发送给对端;以及用于接收对端发送的音视频数据,并将
该对端发送的音视频数据发送给所述音视频解码单元;
所述音视频解码单元,用于将对端发送的音视频数据解码成相应的左、
右眼图像数据和音频数据,并将解码后的左、右眼图像数据发送给所述视频
输出单元进行3D视频显示,以及将解码后的音频数据发送给所述音频输出
单元进行音频输出。
2.根据权利要求1所述的头戴设备,其特征在于,所述视频输出单元包
括用于接收左眼图像的左显示屏和用于接收右眼图像的右显示屏,所述左显
示屏靠近人眼的一侧设置有左光学系统,所述右显示屏靠近人眼一侧设置有
右光学系统,所述左、右光学系统,用于使人的左眼和右眼在透过相应的光
学系统看到左显示屏和...

【专利技术属性】
技术研发人员:杨向臣张瑞生
申请(专利权)人:北京小鸟看看科技有限公司
类型:新型
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1