一种全景视频通信的方法及系统技术方案

本发明专利技术适用于视频通信技术领域，提供了一种全景视频通信的方法及系统，所述方法包括：通过多个摄像头采集图像信息；提取所述图像信息中的同步图像帧；将提取的所述同步图像帧进行拼接，获取全景视频；将所获取的全景视频发送给通信终端。通过本发明专利技术，使得通信终端间可以实现全景视频的聊天，有效增强视频聊天的真实感。

【技术实现步骤摘要】
一种全景视频通信的方法及系统
本专利技术属于视频通信
，尤其涉及一种全景视频通信的方法及系统。
技术介绍
全景(Panorama)技术是把相机环360度拍摄的一组或者多组照片拼接成一个全景图像。全景技术广泛应用于三维电子商务，如在线的房地产楼盘展示、虚拟旅游、虚拟教育等领域的视觉新技术，它给人们带来了全新的真实现场感和交互式的感受。随着技术的发展，越来越多的人可以享受到视频通信带来的便利和乐趣，例如，现有基于3G的视频电话或者即时通信工具中的视频聊天等。然而，现有的视频通信仅仅是基于二维平面的，缺乏真实的立体感受。因此，将全景技术应用于视频通信中将显得十分重要。
技术实现思路
本专利技术实施例的目的在于提供一种全景视频通信的方法，以解决现有视频通信仅仅是基于二维平面的，缺乏真实立体感受的问题。本专利技术实施例是这样实现的，一种全景视频通信的方法，所述方法包括:通过多个摄像头采集图像信息；提取所述图像信息中的同步图像帧；将提取的所述同步图像帧进行拼接，获取全景视频；将所获取的全景视频发送给通信终端。本专利技术实施例的另一目的在于提供一种全景视频通信的系统，所述系统包括:[0011 ] 多个摄像头以及数字电视接收装置，所述多个摄像头与所述数字电视接收装置连接;所述摄像头，用于采集图像信息；所述数字电视接收装置，用于提取多个摄像头采集的所述图像信息中的同步图像帧，将提取的所述同步图像帧进行拼接，获取全景视频，并将所获取的全景视频发送给通信终端。本专利技术实施例的有益效果是:本专利技术实施例将全景技术应用到视频聊天中，使得通信终端间可以实现全景视频的聊天，有效增强视频聊天的真实感。而且，本专利技术实施例中不需要借助昂贵、复杂的第三方设备(如鱼眼镜头等)，降低了全景技术应用的复杂度和成本，提高了全景视频合成的效率。【附图说明】为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1是本专利技术第一实施例提供的全景视频通信方法的实现流程图；图2中的2a、2b、2c是本专利技术第一实施例提供的图像信息处理的示例图；图3是本专利技术第二实施例提供的全景视频通信方法的交互流程图；图4是本专利技术第三实施例提供的全景视频通信系统的组成结构图；图5是本专利技术第三实施例提供的全景视频通信的示意图；图6是本专利技术第四实施例提供的全景视频通信系统的应用场景图。【具体实施方式】为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。为了说明本专利技术所述的技术方案，下面通过具体实施例来进行说明。实施例一:图1示出了本专利技术第一实施例提供的全景视频通信方法的实现流程，其过程详述如下:在步骤SlOl中，通过多个摄像头采集图像信息。在本实施例中，各摄像头分别采集不同区域或者不同范围内的图像信息，，并记录图像信息采集的时间。所述多个摄像头可以实现全方位覆盖的图像信息采集(例如三个摄像头，第一个摄像头采集(0°，120°)范围内的图像信息，第二个摄像头采集(120°，240°)范围内的图像信息，第二个摄像头采集(240°，360°)范围内的图像信息)。各摄像头采取串联的方式连接，以保证图像信息采集的同步。在步骤S102中，提取所述图像信息中的同步图像帧。在本实施例中，根据图像信息采集的时间，提取所述图像信息中的同步图像帧。其中，所述同步图像帧是指各摄像头在同一时间点采集的不同方向的图像信息，如图2a所/Jn o在步骤S103中，将提取的所述同步图像帧进行拼接，获取全景视频。在本实施例中，将某一时间段内同一时间点采集的不同方向的图像信息进行拼接获得全景静态图像，再将所述时间段内所有的全景静态图像组合生成全景视频。其中，所述将提取的所述同步图像帧进行拼接具体包括:获取所述同步图像巾贞中的特征点，例如通过SIFT (Scale Invariant FeatureTransform)算法获取所述同步图像巾贞中的特征点，所述特征点可以为图像中的房屋、人等影像。根据所述特征点对所述同步图像帧进行匹配，删除所述同步图像帧中的重叠部分；本实施例还包括根据匹配后的图像的特征点迭代计算出最佳的投影模型，即摄像头拍摄的空间物体在像平面的最佳投影，包括图像的缩放等操作。根据所述特征点，对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像，如图2b所示。优选的是，本实施例在所述将提取的所述同步图像帧进行拼接的步骤之后，还包括:对拼接后的图像进行剪裁。在本实施例中，由于摄像头采集的图像不能保证是水平平移的，所以拼接后的图像也可能会存在高低偏差(如图2b所示)，因此需要对高低有偏差的部分进行裁剪，剪裁后的图像如图2c所示。在步骤S104中，将所获取的全景视频发送给通信终端。例如，当本实施例执行主体为第一终端时，则所述第一终端将所获取的全景视频发送给与所述第一终端连接通信的第二终端，所述第二终端接收并显示所述第一终端发送的全景视频。优选的是，为了实现实时的“面对面”交互体验，本实施例还包括:接收并显示所述通信终端发送的全景视频。其中，通信终端发送的所述全景视频可以采用本实施例的上述方法获取，在此不再赘述。优选的是，为了方便对全景视频的显示控制，本实施例还包括:向所述通信终端发送遥控信息，以使得所述通信终端在接收到所述遥控信息后，根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令，并根据所获取的显示控制指令控制所述通信终端显示器上全景视频的显示。其中，所述遥控信息包括手势信息，以便于用户在触摸屏上通过多点触摸等方式实现对所述全景视频的显示控制。实施例二:图3示出了本专利技术第二实施例提供的全景视频通信方法的交互流程，其过程详述如下:1、第一终端和第二终端通过多个摄像头采集图像信息。在本实施例中，第一终端和第二终端通过多个摄像头(例如3个)对不同视角方向进行全方位覆盖的图像信息采集。2、第一终端提取所采集的图像信息中的同步图像帧，将提取的所述同步图像帧进行拼接，获取对应的第一全景视频；第二终端提取所采集的图像信息中的同步图像帧，将提取的所述同步图像帧进行拼接，获取对应的第二全景视频。在本实施例中，所述同步图像帧是指所述摄像头在某一时间段的同一时间点采集的不同视角方向的图像信息。将该时间点采集的不同视角方向的图像信息进行拼接后生成一张全景静态图像，将该时间段内的所有全景静态图像组合后生成全景视频。需要说明的是，现有全景静态图像是通过鱼眼镜头等复杂设备拍摄特定区域内的图片，再将所拍摄的图片经过处理后合成的。现有技术只是基于静态图片的处理，而本实施例是基于实时图片的处理，本实施例通过采集实时图像，提取所述实时图像中的同步图像帧，将提取的所述同步图像帧进行拼接，来获取实时的全景视频，进一步提高用户的体验效果。3、将所获取的第一全景视频发送给所述第二终端；将所获取的第二全景视频发送给所述第一终端。4、第二终端接收所述第一终端发送的第一全景视频，并将所述第一全景视频显示在所述第二终端的本文档来自技高网...

【技术保护点】
一种全景视频通信的方法，其特征在于，所述方法包括：通过多个摄像头采集图像信息；提取所述图像信息中的同步图像帧；将提取的所述同步图像帧进行拼接，获取全景视频；将所获取的全景视频发送给通信终端。

【技术特征摘要】
1.一种全景视频通信的方法，其特征在于，所述方法包括: 通过多个摄像头采集图像信息； 提取所述图像信息中的同步图像帧； 将提取的所述同步图像帧进行拼接，获取全景视频； 将所获取的全景视频发送给通信终端。2.如权利要求1所述的方法，其特征在于，所述方法还包括: 通信终端接收并显示所述全景视频。3.如权利要求1或2所述的方法，其特征在于，所述方法还包括: 向所述通信终端 发送遥控信息，以使得所述通信终端在接收到所述遥控信息后，根据预先建立的遥控信息与显示控制指令的映射关系获取对应的显示控制指令，并根据所获取的显示控制指令控制所述通信终端全景视频的显示。4.如权利要求3所述的方法，其特征在于，所述遥控信息包括手势信息。5.如权利要求1所述的方法，其特征在于，所述将提取的所述同步图像帧进行拼接具体包括: 获取所述同步图像帧中的特征点； 根据所述特征点对所述同步图像帧进行匹配，删除所述同步图像帧中的重叠部分； 根据所述特征点，对所述删除重叠部分的同步图像帧进行边缘融合获得全景静态图像。6.如权利要求1所述的方法，其特征在于，在所述将提取的所述同步图像帧进行拼接的步骤之后，还包括: 对拼接后的图像进行剪裁。7.—种全景视频通信的系统，其特征在于，所述系统包括: 多个摄像头以及数字电视接收装置，所述多个摄像头与所述数字电视接收装置连接； 所述摄像头，用于采集图像信息； 所述数字电视接收装置，用于提取多个摄像头采集的所述图像信息中的同步图像帧，将提取的所述同步图像帧进行拼接，获取全景视频，并将所获取的全景视频发送给通信终端。8.如权利要求7所述的系统，其...

【专利技术属性】
技术研发人员：肖锐毅，邹灵灵，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：