图像数据处理系统和相关方法以及相关图像融合方法技术方案

本发明专利技术提供一种图像数据处理系统和用于处理图像的相关方法以及图像融合的方法。在图像数据处理系统中处理全景图像的方法包括如下步骤：自至少一个图像输入接口接收多个源图像，其中多个源图像至少包括多个重叠部分；接收浏览视点和视角信息；基于浏览视点和视角信息，确定多个源图像的多个已裁剪图像；基于多个源图像的多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。本发明专利技术提供的图像数据处理系统和用于处理图像的相关方法以及图像融合的方法，可降低消耗的功率。

【技术实现步骤摘要】
图像数据处理系统和相关方法以及相关图像融合方法
本专利技术是有关于图像处理，特别是有关于处理全景图像(panoramaimages)及其图像融合(imageblending)的图像数据处理系统及其相关方法。
技术介绍
随着计算机技术的发展，全景图像的应用越来越普及。全景图像为具有异常大视野(field-of-view,FOV)、夸张的长宽比(aspectratio)、或其组合的图像。在全景图像中，不牺牲分辨率的情况下，多个图像可被组合或拼接(stitch)在一起以增加视野。全景图像有时也被称为“全景”，它能提供360度的场景图。然而，拼接图像涉及大量的技术和图像处理。近来，电子装置，例如移动或手持装置，在技术上变得越来越先进和多功能。举例来说，移动装置可接受邮件消息，具有先进的地址簿管理应用，允许多媒体播放，以及具有各种其他功能。由于具有多功能的电子装置使用方便，这些电子装置成为生活的必需品。由于用户需求和行为的改变，全景图像的应用已成为手持装置的必需品。社交网络服务器可执行图像拼接以产生360度全景图像，并在客户端提供有观看者浏览或预览的全景图像。目前，当在客户端的观看者请求自服务本文档来自技高网...

【技术保护点】
一种在图像数据处理系统中的图像处理方法，其特征在于，该方法包括：接收多个源图像，其中该多个源图像至少包括多个重叠部分；接收浏览视点和视角信息；基于该浏览视点和该视角信息，确定该多个源图像的多个已裁剪图像；基于该多个源图像的该多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。

【技术特征摘要】
2016.02.19 US 62/297,203;2017.01.30 US 15/418,9131.一种在图像数据处理系统中的图像处理方法，其特征在于，该方法包括：接收多个源图像，其中该多个源图像至少包括多个重叠部分；接收浏览视点和视角信息；基于该浏览视点和该视角信息，确定该多个源图像的多个已裁剪图像；基于该多个源图像的该多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。2.根据权利要求1所述的在图像数据处理系统中的图像处理方法，其特征在于，进一步包括：当该透视图像或该全景图像的视野大于预定阈值时，下采样该多个源图像。3.根据权利要求1所述的在图像数据处理系统中的图像处理方法，其特征在于，该基于该多个源图像的该多个已裁剪图像，产生该透视图像或该全景图像的步骤进一步包括:基于该浏览视点和该视角信息，传输或映射该多个源图像的该多个已裁剪图像至多个球面图像；基于该视角信息和由该图像数据处理系统的传感器收集的传感器数据，扭曲或旋转该多个球面图像以产生多个已旋转的图像；以及基于距离图融合该多个已旋转的图像，以产生该透视图像或该全景图像。4.根据权利要求3所述的在图像数据处理系统中的图像处理方法，其特征在于，该基于该浏览视点和该视角信息，传输该多个源图像的该多个已裁剪图像至多个球面图像的步骤进一步包括：利用具有映射表的球面投影，以传输该多个源图像的该多个已裁剪图像至该多个球面图像；其中，该多个源图像的该多个已裁剪图像包括第一组像素点和第二组像素点，以及该第一组像素点的值自该映射表而得到；以及该第二组像素点的值通过在该球面投影过程中对该第一组像素点进行插值操作而被计算出来。5.根据权利要求3所述的在图像数据处理系统中的图像处理方法，其特征在于，该基于距离图融合该多个已旋转的图像，以产生该透视图像或该全景图像的步骤包括：在拼接缝边界利用阿尔法融合来融合该多个已旋转的图像以消除由该多个源图像的该多个重叠部分引起的、围绕该拼接缝的不规则或不连续。6.根据权利要求3所述的在图像数据处理系统中的图像处理方法，其特征在于，该基于距离图融合该多个已旋转的图像，以产生该透视图像或该全景图像的步骤包括：基于该距离图利用具有多层的金字塔融合以融合该多个已旋转的图像，其中三个缓冲器被分别配置为存储初始图像、在该金字塔融合的每一层中产生的高斯图像、拉普拉斯图像，以及被配置为存储该初始图像的缓冲器和被配置为存储该高斯图像的缓冲器在该金字塔融合的下一层被相互切换。7.根据权利要求3所述的在图像数据处理系统中的图像处理方法，其特征在于，该基于该视角信息和由该图像数据处理系统的传感器收集的传感器数据，旋转该多个球面图像的步骤进一步包括：基于该视角信息确定投影平面；基于该传感器数据旋转该投影平面；以及利用已旋转的投影平面，旋转该多个球面图像以产生该多个已旋转的图像。8.根据权利要求1所述的在图像数据处理系统中的图像处理方法，其特征在于，进一步包括：确定该多个已裁剪图像是否穿过一个以上的源图像；当确定该已裁剪图像穿过一个以上的源图像时，融合该多个源图像的该多个已裁剪图像，以产生该透视图像或该全景图像；以及当确定该已裁剪图像没有穿过一个以上的源图像时，直接输出该多个已裁剪图像作为该透视图像或该全景图像。9.根据权利要求1所述的在图像数据处理系统中的图像处理方法，其特征在于，进一步包括：该多个源图像中的每一个被分为多个区块，以及该多个已裁剪图像选自该多个区块的一部分。10.一种在图像数据处理系统中融合第一图像和第二图像以产生融合图像的方法，其特征在于，该方法包括：基于该第一图像和该第二图像对应的内容，确定该第一图像和该第二图像之间的拼接缝；计算该拼接缝和...

【专利技术属性】
技术研发人员：黄昱豪，张翠姗，林奕廷，刘子明，杨凯闵，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：中国台湾,71