即时影像处理方法及其装置制造方法及图纸

本发明专利技术提供一种即时影像处理方法及其装置。即时处理装置用以执行即时影像处理方法。即时影像处理方法包含撷取第一影像、第二影像及第三影像，再提高第一影像、第二影像及第三影像的解析度，获得第一高析影像、第二高析影像及第三高析影像，并由第一高析影像、第二高析影像及第三高析影像获得第一位移向量及第二位移向量，并依据第一位移向量、第二位移向量、第一高析影像、第二高析影像、第三高析影像获得叠置高析影像，再由第一位移向量、及第二位移向量获得补偿位移向量，最终以补偿位移向量输出超解析影像。

【技术实现步骤摘要】
即时影像处理方法及其装置
本专利技术关于一种影像处理，特别是一种即时解析度运算的影像处理方法及其装置。
技术介绍
现今影像处理技术的研究与改良，大多着重于提供给使用者更好的视觉体验。而影响使用者视觉体验的主要因素之一就是影像的解析度。此外，于手持摄影装置及具光学变焦功能的监视器中，影响使用者视觉体验的因素更包括了因手持摄影装置的手震、及监视器机身移动时造成的晃动。倘若只要获得具高解析度并清楚的影像，于常见的数字相机及摄影机中，一般使用光学变焦及数字变焦。当使用者的要求超过了光学变焦可以支援的最大倍率时，数字变焦将会取代光学变焦。而数字变焦的变焦方式则是由内建的处理器进行模拟放大，在像素上必然有些部分是模拟产生，因此对于影像的画质有所影响。但若只是将影像放大，并没有提高影像的视觉清晰度，往往造成放大后的影像存在着模糊感。而影像放得越大，就越有这样的问题。再者，大多数使用者并不是专业的摄影人员，因此常常于使用数字相机或摄影机时造成手震。先前有研发物理的改良方式，以减少镜头的震动。物理的改良方式则是于镜头上设置防震元件，但这种改良方式会增加成本及机身的重量。对于目前使用者对于数字相机的轻便需求，仍存在无法克服的问题。另一方面，对于解析度的要求，这种方法亦无法处理。综合上述，于现有影像处理方式中，虽然都有各自解决的方式，但于获得高视觉清晰度的影像上，数字变焦仍有一定的限制。而于防止影像震动产生的模糊问题，经由加装防震元件于镜头上的方式，会让影像处理装置的整体架构变得较为复杂、增加机身重量或提高成本等问题。
技术实现思路
鉴于以上的问题，本专利技术提出一种即时影像处理装置及其方法，用以帮助使用者于使用影像处理装置时，可提高连续影像的解析度并同时减少震动。本专利技术提供一即时影像处理方法，其包含撷取一第一影像、一第二影像及一第三影像。再提高第一影像、第二影像及第三影像的解析度，用以分别得到一第一高析影像、一第二高析影像及一第三高析影像。并藉由第一高析影像及第二高析影像获得第一位移向量，再由第二高析影像及第三高析影像获得第二位移向量。并由第一位移向量、第二位移向量、第一高析影像、第二高析影像及第三高析影像取得一叠置高析影像。再由第一位移向量及第二位移向量获得一补偿位移向量，并根据补偿位移向量产生超解析影像。本专利技术再提供一种即时影像处理装置，其包含一影像撷取单元及一影像处理单元。影像撷取单元用以撷取第一影像、第二影像及第三影像。影像处理单元连接影像撷取单元，执行一即时影像处理方法，以获得超解析影像，其包含以下步骤。先撷取第一影像、第二影像及第三影像，再提高第一影像、第二影像及第三影像的解析度，分别得到第一高析影像、第二高析影像及第三高析影像。并利用第一影像、第二影像及第三影像获得第一位移向量及第二位移向量。并由第一位移向量、第二位移向量、第一高析影像、第二高析影像及第三高析影像取得一叠置高析影像。再依据第一位移向量、第二位移向量获得一补偿位移向量，并依据补偿位移向量输出超解析影像。以上的关于本
技术实现思路
的说明及以下的实施方式的说明用以示范与解释本专利技术的精神与原理，并且提供本专利技术的专利申请范围更进一步的解释。附图说明图1，为本专利技术一实施例的即时影像处理方法的流程图；图2，为本专利技术一实施例的即时影像处理装置的架构图；图3，为本专利技术一实施例的即时影像处理方法中影像内容进行位移的示意图；图4，为本专利技术一实施例的即时影像处理方法中影像内容位移比对的示意图；图5，为本专利技术一实施例的即时影像处理方法中叠置高析影像其像素重叠的示意图；图6，为本专利技术一实施例的即时影像处理装置的使用示意图；图7，为本专利技术一实施例的即时影像处理方法中获得高析影像的示意图；图8，为本专利技术一实施例的即时影像处理方法中移动向量计算的示意图。其中，附图标记：30即时影像处理装置302影像撷取单元304影像处理单元306影像输出单元42第一影像44第二影像46第三影像52第一高析影像522影像内容54第二高析影像542第一目前影像内容544第一先前影像位置56第三高析影像562第二目前影像内容564第二先前影像位置602像素位置604像素位置606像素位置608像素位置62覆盖像素70即时影像处理装置702影像撷取单元704影像处理单元706影像输出单元72影像标的物80原始影像82高析影像822空白像素90第一高析影像902第一区块92第二高析影像922第二区块924第一目前影像内容926第一先前影像位置94第三高析影像942第三区块944第二目前影像内容946第二先前影像位置具体实施方式以下在实施方式中详细叙述本专利技术的详细特征以及优点，其内容足以使任何熟习相关技艺者了解本专利技术的
技术实现思路
并据以实施，且根据本说明书所揭露的内容、申请专利范围及图式，任何熟习相关技艺者可轻易地理解本专利技术相关的目的及优点。以下的实施例进一步详细说明本专利技术的观点，但非以任何观点限制本专利技术的范畴。鉴于现有技术已存在的问题，本专利技术提出一种即时影像处理方法及其装置。其中即时影像处理装置可为一数字相机、一摄影机或一监视器等，或是任何具有如前述可以执行本专利技术所提出的即时影像处理方法和即时影像处理方法的装置。且影像处理装置也可以应用于手持设备拍摄、自动移动设备拍摄或是各种进行移动的装置进行监视或是观察用途。请参考图1，其为本专利技术一实施例的即时影像处理方法的流程图。其中即时影像处理方法可包含下列步骤：撷取一第一影像、一第二影像及一第三影像（步骤S100）；提高第一影像、第二影像及第三影像的解析度，得到一第一高析影像、一第二高析影像及一第三高析影像（步骤S110）；利用第一高析影像、第二高析影像及第三高析影像，得到一第一位移向量及一第二位移向量（步骤S120）；利用第一位移向量及第二位移向量，结合第一高析影像、第二高析影像及第三高析影像，获得一叠置高析影像（步骤S130）；在经由计算第一位移向量及第二位移向量后，获得一补偿位移向量（步骤S140）；再利用补偿位移向量，结合叠置高析影像，获得一超解析影像（步骤S150）。在步骤S100中，请一并参照图2及图3，其中第一影像42、第二影像44及第三影像46，经由即时影像处理装置30中的影像撷取单元302进行撷取。影像撷取单元302可为数字相机的感光元件，但并不以此为限。而第一影像42、第二影像44及第三影像46具有同一摄影范围及时间上的先后相依性，于本实施例中，第一影像42、第二影像44及第三影像46，其为在时间轴上依序撷取的影像，但并不以此为限。撷取影像时，并不以三张为限。但至少需撷取两张影像以上，撷取越多影像加入即时影像处理方法可让最后产生的超解析影像更为精细。而在步骤S110中，第一影像42、第二影像44和第三影像46分别拥有多个原始像素点，而提高解析度的做法可以为但不限于在原始像素点之间将多个空白像素点插入。请参阅图4，其中第一高析影像52、第二高析影像54和第三高析影像56，为第一影像42、第二影像44和第三影像46插入空白像素后产生的高析影像。值得注意的是，放大倍率不一定为长与宽的比值采一比一的正方形式的提高解析度，也可以为长方形式的提高解析度，也就是说，可以将所撷取到的正方形影像，在一轴向(如水平轴)放大三倍形成长轴，而另一轴(如垂直轴)放大二倍形本文档来自技高网...

【技术保护点】
一种即时影像处理方法，其特征在于，该即时影像处理方法包含：撷取一第一影像、一第二影像及一第三影像；提高该第一影像、该第二影像及该第三影像的解析度以分别得到一第一高析影像、一第二高析影像及一第三高析影像；利用该第一高析影像、该第二高析影像及该第三高析影像获得一第一位移向量及一第二位移向量；依据该第一位移向量、该第二位移向量、该第一高析影像、该第二高析影像及该第三高析影像获得一叠置高析影像；依据该第一位移向量、及该第二位移向量获得一补偿位移向量；以及依据该补偿位移向量输出一超解析影像。

【技术特征摘要】
2013.06.14 TW 1021212521.一种即时影像处理方法，其特征在于，该即时影像处理方法包含：撷取一第一影像、一第二影像及一第三影像；提高该第一影像、该第二影像及该第三影像的解析度以分别得到一第一高析影像、一第二高析影像及一第三高析影像；利用该第一高析影像、该第二高析影像及该第三高析影像获得一第一位移向量及一第二位移向量；依据该第一位移向量、该第二位移向量、该第一高析影像、该第二高析影像及该第三高析影像获得一叠置高析影像，其中该叠置高析影像具有至少一覆盖像素，且该至少一覆盖像素与周围相邻的像素具有彼此重叠的区域；依据该第一位移向量、及该第二位移向量获得一补偿位移向量；以及依据该补偿位移向量输出一超解析影像，其中该第一影像、该第二影像及该第三影像各别包含了多个原始像素点，依据该第一位移向量、该第二位移向量、该第一高析影像、该第二高析影像及该第三高析影像获得该叠置高析影像的步骤包含：依据该第一位移向量与该第二位移向量将该第一高析影像与该第二高析影像及该第三高析影像重叠，获得该叠置高析影像，该叠置高析影像包含该第一影像、该第二影像与该第三影像的所述原始像素点、以及多个剩余空白像素点；以及依据该第一影像、该第二影像与该第三影像的所述原始像素点而获得所述剩余空白像素点的值。2.根据权利要求1所述的即时影像处理方法，其特征在于，该第一影像、该第二影像及该第三影像各别包含了多个原始像素点，提高该第一影像、该第二影像及该第三影像的解析度以分别得到该第一高析影像、该第二高析影像及该第三高析影像为依据一放大倍率于该第一影像、该第二影像及该第三影像的所述原始像素点间插入多个高析空白像素点。3.根据权利要求1所述的即时影像处理方法，其特征在于，该各别获得该第一高析影像、该第二高析影像及该第三高析影像的该第一位移向量、及该第二位移向量包含：使用区块移动估计法计算所述位移向量或是使用光流法计算所述位移向量。4.根据权利要求1所述的即时影像处理方法，其特征在于，获得该补偿向量的方法为以下一公式组：其中i、n及k为自然数，为第n影像的补偿向量，且为第i影像相对于第(i-1)影像的位移向量，Wn-1与Wn为以任意数表示的权重值，在计算该第三影像及该第三影像之后续影像的补偿向量时，Wn-1为一常数Wa，Wn亦为一常数Wb。5.根据权利要求4所述的即时影像处理方法，其特征在于，该公式组中的k值由绝对值总合法决定，绝对值总合法公式如下，其中A(x,y)代表A影像中对应坐标(x,y)的像素值，B(x,y)代表B影像中对应坐标(x,...

【专利技术属性】
技术研发人员：吴仁智，
申请(专利权)人：晶睿通讯股份有限公司，
类型：发明
国别省市：中国台湾;71