立体影像处理方法及系统技术方案

本发明专利技术公布一种立体影像处理方法及系统，方案采用水平方向的六个鱼眼镜头，将获取的六个鱼眼图像展开成经纬度图像，通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，拼接融合成全景图像，根据全景图像拼接好的位置，提取经纬度图像中线左侧和右侧各60度视场角的拼接块，拼接生成左眼视角全景图像和右眼视角全景图像，最后将左眼视角全景图像和右眼视角全景图像同步处理后生成3D立体全景影像。本发明专利技术技术方案生成的3D立体全景影像提升了用户体验，消除了视角差，增强了用户的体验感和沉浸感，增强了产品竞争力。

Stereoscopic image processing method and system

The invention discloses a stereo image processing method and system, scheme six fisheye lens by horizontal direction, start the six fisheye image will get into the latitude and longitude image by feature point matching to find the six relative position of the fisheye image, obtain each fisheye image around the X axis rotation angle around the Y axis, row rotation angle, angle of rotation around the pitch Z axis yaw, fusion splicing into panoramic images based on panoramic image mosaic good location, latitude and longitude of the image mosaic block extraction line on the left and right 60 degree viewing angle, splicing create left view panoramic image and the right eye view panoramic image, the left eye view panorama the image and the right eye view panoramic image synchronous processing to generate 3D stereo panoramic images. The 3D stereoscopic panoramic image generated by the technical proposal of the invention improves the user experience, eliminates the visual angle difference, enhances the user's sense of experience and immersion, and enhances the competitive power of the product.

【技术实现步骤摘要】
立体影像处理方法及系统
本专利技术属于影像处理领域，尤其涉及一种立体影像处理方法及系统。
技术介绍
随着3D立体视觉技术和全景拍摄设备的发展和流行，人们对3D立体视觉体验要求不断提升，全景图像可以记录360°的图像，给人们带来强烈的真实感和立体视觉，这种全景记录在旅游、直播、影视、房地产等多个行业存在广泛的应用。目前的3D立体视频处理方式大多数是使用一张360°全景图像生成具有左右眼视差的立体图像，其中的视差计算问题没有得到很好的解决，造成用户体验较差，影响了用户的使用感受。鉴于现有技术的不足，有必要对现有技术的不足进行改善，以提升使用者的体验。
技术实现思路
本专利技术的目的是提供一种生成3D立体影像的处理方法及系统，旨在解决现有技术中3D立体影像处理造成的视差问题，提升用户的体验度。本专利技术提供一种立体影像处理系统，包括鱼眼图像获取模块，进一步包括：全景图像拼接模块，用于将获取的鱼眼图像进行拼接为全景图像；左眼视角生成模块，用于生成全景图像的左眼视角拼接块，提取左眼视角拼接块后拼接为左眼视角全景图像；右眼视角生成模块，用于生成全景图像的右眼视角拼接块，提取右眼视角拼接块后拼接为右眼视角全景图像；立体影像生成模块，用于同步左眼视角全景图像和右眼视角全景图像，生成立体全景图像。进一步的，立体影像处理系统所述的鱼眼图像获取模块由至少六个超广角鱼眼镜头组成。进一步的，立体影像处理系统所述的立体影像包括视频和图像。进一步的，立体影像处理系统所述的全景图像拼接模块将鱼眼图像展开为经纬度图像，通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，拼接融合成全景图像。进一步的，所述的立体影像处理系统，其中的左眼视角生成模块选取经纬度图像的中心线左边取视场角60度的图像作为拼接块。进一步的，所述的立体影像处理系统，其中的右眼视角生成模块选取经纬度图像的中心线右边取视场角60度的图像作为拼接块。本专利技术提供一种立体影像处理方法，包括启动鱼眼图像获取模块获得鱼眼图像的步骤，进一步包括以下步骤：启动全景图像拼接模块，将鱼眼图像进行拼接；启动左眼视角生成模块，生成左眼视角拼接块，进一步拼接成左眼视角全景图像；启动右眼视角生成模块，生成右眼视角拼接块，进一步拼接成右眼视角全景图像；启动立体影像生成模块，生成立体全景图像。进一步的，所述的立体影像处理方法，所述的鱼眼图像获取模块由至少六个超广角鱼眼镜头组成。进一步的，所述的立体影像处理方法，所述的立体影像包括视频和图像。进一步的，所述的立体影像处理方法，所述的全景图像拼接模块将鱼眼图像展开为经纬度图像，通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，拼接融合成全景图像。进一步的，所述的立体影像处理方法，所述的左眼视角生成模块选取经纬度图像的中心线左边取视场角60度的图像作为拼接块。进一步的，所述的立体影像处理方法，所述的右眼视角生成模块选取经纬度图像的中心线右边取视场角60度的图像作为拼接块。本专利技术方案采用水平方向的至少六个鱼眼镜头，将获取的至少六个鱼眼图像展开成经纬度图像，通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，拼接融合成全景图像。根据全景拼接好的位置，提取经纬度图像中线左侧和右侧各60度视场角的拼接块，拼接生成左眼视角全景图像和右眼视角全景图像，将左眼视角全景图像和右眼视角全景图像同步处理后生成3D立体全景影像。本专利技术技术方案生成的3D立体全景影像提升了用户体验，消除了视角差，增强了用户的体验感和沉浸感，增强了产品竞争力。附图说明图1立体影像处理系统示意图。图2立体影像处理方法流程图。图3全景图像拼接模块流程图。图4特征点匹配示意图。图5左眼视角生成模块处理流程图。图6左眼视角拼接块提取示意图。图7右眼视角生成模块处理流程图。图8右眼视角拼接块提取示意图。图9立体影像生成模块处理示意图。图10立体影像形成示意图。具体实施方式为了使本专利技术的目的、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。为了描述方便，本实施例以全景图像为例进行说明，本领域技术人员应当知晓，本专利技术方案也可以应用于全景视频处理领域。如图1所示为本专利技术立体影像处理系统示意图，该立体影像处理系统包括鱼眼图像获取模块101，用于获取鱼眼图像；全景图像拼接模块102电连接鱼眼图像获取模块101，用于将获取的鱼眼图像进行拼接为全景图像；左眼视角生成模块103和右眼视角生成模块104分别与全景图像拼接模块102电连接；左眼视角生成模块103，用于提取全景图像的左眼视角拼接块，生成左眼视角全景图像；右眼视角生成模块104，用于提取全景图像的右眼视角拼接块，生成右眼视角全景图像；立体影像生成模块105分别与左眼视角生成模块103和右眼视角生成模块104电连接，用于同步左眼视角全景图像和右眼视角全景图像，生成立体全景图像。如图2所示为立体影像处理方法流程图，首先，步骤S201启动鱼眼图像获取模块，获得鱼眼图像I1、I2、I3、I4、I5、I6，步骤S202启动全景图像拼接模块，将鱼眼图像I1、I2、I3、I4、I5、I6进行拼接，步骤S203启动左眼视角生成模块，生成左眼视角全景图像，步骤S204启动右眼视角生成模块，生成右眼视角全景图像，步骤S205启动立体影像生成模块，生成立体全景图像。如图3所示为全景图像拼接模块流程图，并结合图4本专利技术特征点匹配示意图，首先，步骤S301获取鱼眼图像I1、I2、I3、I4、I5、I6，接着，步骤S302根据预设的鱼眼数学模型将鱼眼图像I1、I2、I3、I4、I5、I6各自展开为经纬度图像，步骤S303通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，步骤S304将经纬度图像拼接融合成全景图像。如图5所示为本专利技术左眼视角生成模块处理流程图，首先，步骤S501生成左眼视角拼接块，结合图6左眼视角拼接块提取示意图所示，在经纬度图像中心线AB左边取视场角60度的图像作为拼接块，六幅经纬图依次提取六块左视角拼接块，记为L1，L2，L3，L4，L5，L6。步骤S502提取左眼视角拼接块，依次拼接临近的两个拼接块，最终得到一张全景图像LP，如拼接块L1的右边与拼接块L2的左边进行拼接融合，步骤S503生成左眼视角全景图像，将全景图像LP转换成立体球型全景，并把球心作为左眼位置，获得左眼视角全景图像。如图7所示为本专利技术右眼视角生成模块处理流程图，首先，步骤S701生成右眼视角拼接块，结合图8右眼视角拼接块提取示意图所示，在经纬度图像中心线AB右边取视场角60度的图像作为拼接块，六幅经纬图依次提取六块右视角拼接块，记为R1，R2，R3，R4，R5，R6。步骤S702提取右眼视角拼接块，依次拼接本文档来自技高网...

【技术保护点】
一种立体影像处理系统，包括鱼眼图像获取模块，其特征在于，进一步包括：全景图像拼接模块，用于将获取的鱼眼图像拼接为全景图像；左眼视角生成模块，用于生成全景图像的左眼视角拼接块，提取左眼视角拼接块后拼接为左眼视角全景图像；右眼视角生成模块，用于生成全景图像的右眼视角拼接块，提取右眼视角拼接块后拼接为右眼视角全景图像；立体影像生成模块，用于同步左眼视角全景图像和右眼视角全景图像，生成立体全景图像。

【技术特征摘要】
1.一种立体影像处理系统，包括鱼眼图像获取模块，其特征在于，进一步包括：全景图像拼接模块，用于将获取的鱼眼图像拼接为全景图像；左眼视角生成模块，用于生成全景图像的左眼视角拼接块，提取左眼视角拼接块后拼接为左眼视角全景图像；右眼视角生成模块，用于生成全景图像的右眼视角拼接块，提取右眼视角拼接块后拼接为右眼视角全景图像；立体影像生成模块，用于同步左眼视角全景图像和右眼视角全景图像，生成立体全景图像。2.如权利要求1所述的立体影像处理系统，其特征在于，所述的鱼眼图像获取模块由至少六个超广角鱼眼镜头组成。3.如权利要求1所述的立体影像处理系统，其特征在于，所述的立体影像包括视频和图像。4.如权利要求1所述的立体影像处理系统，其特征在于，其中的全景图像拼接模块将鱼眼图像展开为经纬度图像，通过特征点匹配找到六个鱼眼图像的相对位置，获得每个鱼眼图像围绕X轴旋转的旋转角度row、围绕Y轴旋转的旋转角度pitch、围绕Z轴旋转的旋转角度yaw，拼接融合成全景图像。5.如权利要求1所述的立体影像处理系统，其特征在于，其中的左眼视角生成模块选取经纬度图像的中心线左边取视场角60度的图像作为左眼视角拼接块。6.如权利要求1所述的立体影像处理系统，其特征在于，其中的右眼视角生成模块选取经纬度图像的中心线右边取视场角60度的图像作为右眼视角...

【专利技术属性】
技术研发人员：尹程龙，刘靖康，蔡锦霖，
申请(专利权)人：深圳岚锋创视网络科技有限公司，
类型：发明
国别省市：广东,44