图像处理方法与图像处理装置制造方法及图纸

本发明专利技术涉及图像处理方法与图像处理装置，它根据滚动文字的信息与边缘图中的运动边缘对来决定插值帧中的滚动文字区域。首先，根据边缘图中的运动边缘对检测文字图像块。接着，根据检测到的文字图像块建立第一运动向量直方图与第二运动向量直方图。根据第一运动向量直方图与第二运动向量直方图决定两帧之间是否存在滚动文字，文字滚动的方向以及速度。根据滚动文字的方向、速度以及两帧中至少一帧中的滚动文字区域，决定插值帧中各个滚动文字像素所在的位置，并给插值帧中图像块按照类型赋予不同的运动向量，背景图像块赋予背景运动向量，文字图像块赋予文字运动向量。

Image Processing Method and Image Processing Device

【技术实现步骤摘要】
图像处理方法与图像处理装置
本专利技术涉及一种图像处理方法与图像处理装置，且特别涉及藉由滚动文字信息与文字相关的运动边缘决定插值帧中的文字区域的图像处理方法与图像处理装置。
技术介绍
由于显示科技与处理能力的发展，当前市场特别要求显示科技具备高分辨率、高亮度、低能耗以及高帧率的性能表现。为了增加视频序列的帧率，帧率转换(framerateupconversion，FRC)系统应运而生，藉以基于现有帧来产生插值帧。举例来说，插值帧可基于两个连续的帧产生。若视频序列包含文字，文字区域将被内插于插值帧中。现有的文字检测方法通常使用边缘信息以在现有帧中定位文字区域。然而，用边缘信息本身在检测视频序列中的文字区域时并不具备足够的辨识度，特别是具有复杂背景(例如：具有树或是栅栏的背景)的视频序列。因此，现有的文字检测方法可能会无法检测文字或在视频序列中产生许多正误识(falsepositive)。最终，将会导致插值帧的视觉副作用，使得经过帧率转换的视频序列表现差强人意。有鉴于此，需要能够高度正确地检测视频序列的帧中的文字区域并正确地将检测到的文字区域内插至经过帧率转换的视频序列的插值帧中而不产生本文档来自技高网...

【技术保护点】
1.一种图像处理方法，适于具有第一帧与第二帧的视频序列，其特征在于，包括：根据边缘图的运动边缘对检测文字图像块，其中所述边缘图是根据所述第一帧与所述第二帧获得；根据检测到的文字图像块建立第一运动向量直方图与第二运动向量直方图；根据所述第一运动向量直方图与所述第二运动向量直方图，决定滚动文字是否存在与所述滚动文字的运动向量和方向；根据多个文字图像块所在行/列与所述滚动文字的所述运动向量，定位所述第一帧与所述第二帧的至少其中之一中的滚动文字区域，其中所述多个文字图像块所在行/列的方向与所述滚动文字的方向相同；以及根据所述滚动文字的所述运动向量与所述第一帧与所述第二帧的至少其中之一的所述滚动文字区域...

【技术特征摘要】
1.一种图像处理方法，适于具有第一帧与第二帧的视频序列，其特征在于，包括：根据边缘图的运动边缘对检测文字图像块，其中所述边缘图是根据所述第一帧与所述第二帧获得；根据检测到的文字图像块建立第一运动向量直方图与第二运动向量直方图；根据所述第一运动向量直方图与所述第二运动向量直方图，决定滚动文字是否存在与所述滚动文字的运动向量和方向；根据多个文字图像块所在行/列与所述滚动文字的所述运动向量，定位所述第一帧与所述第二帧的至少其中之一中的滚动文字区域，其中所述多个文字图像块所在行/列的方向与所述滚动文字的方向相同；以及根据所述滚动文字的所述运动向量与所述第一帧与所述第二帧的至少其中之一的所述滚动文字区域，决定插值帧中各个滚动文字像素的位置。2.根据权利要求1所述的图像处理方法，其特征在于，其中根据所述边缘图的所述运动边缘对检测所述文字图像块的步骤包括：检测所述第一帧与所述第二帧之间的运动边缘；从检测到的运动边缘中决定所述边缘图的所述运动边缘对，其中各个所述运动边缘对包括上升边缘与下降边缘，且所述上升边缘与所述下降边缘之间的距离在预设区间内。3.根据权利要求2所述的图像处理方法，其特征在于，其中检测所述第一帧与所述第二帧之间的所述运动边缘的步骤包括：检测所述第一帧与所述第二帧中的边缘以分别获得第一边缘图与第二边缘图；计算所述第一边缘图与所述第二边缘图之间的差异，以获得所述第一帧与所述第二帧之间的所述运动边缘；以及移除静态边缘与弱边缘，其中所述静态边缘与所述弱边缘的绝对差异小于预设的阈值。4.根据权利要求2所述的图像处理方法，其特征在于，其中边缘对的所述上升边缘与所述下降边缘之间的所述距离定义所述滚动文字的笔划宽度。5.根据权利要求1所述的图像处理方法，其特征在于，其中决定所述滚动文字是否存在与所述滚动文字的所述运动向量的步骤包括：决定所述第一运动向量直方图中的第一局部最大值与所述第二运动向量直方图中的第二局部最大值；决定是否所述第一局部最大值与所述第二局部最大值的其中之一集中在零且另一个不集中在零；响应于决定所述第一局部最大值与所述第二局部最大值的其中之一集中在零且另一个不集中在零，决定不集中在零的所述局部最大值为对应于所述滚动文字的所述运动向量的局部最大值；决定对应于所述滚动文字的所述运动向量的所述局部最大值是否超过预设阈值；决定对应于所述滚动文字的所述运动向量的所述局部最大值是否超过文字图像块数的比例值；以及决定对应于所述滚动文字的所述运动向量的所述局部最大值是否在所述视频序列中的数个连续帧中保持不变。6.根据权利要求5所述的图像处理方法，其特征在于，其中当一条件组被满足时，所述第一帧与所述第二帧之间存在滚动文字，所述条件组包括：(i)所述第一局部最大值与所述第二局部最大值的其中之一集中在零，且另一个对应于所述滚动文字的所述运动向量；(ii)对应于所述滚动文字的所述运动向量的所述局部最大值超过预设阈值；(iii)对应于所述滚动文字的所述运动向量的所述局部最大值超过文字图像块数的比例值；以及(iv)对应于所述滚动文字的所述运动向量的所述局部最大值在所述视频序列中的数个连续帧中保持不变。7.根据权利要求5所述的图像处理方法，其特征在于，其中：所述滚动文字的所述方向与所述第一局部最大值对应于所述滚动文字的所述运动向量时的第一方向相同，所述滚动文字的所述方向与所述第二局部最大值对应于所述滚动文字的所述运动向量时的第二方向相同。8.根据权利要求1所述的图像处理方法，其特征在于，其中根据所述多个文字图像块所在行/列与所述滚动文字的所述运动向量定位所述第一帧与所述第二帧的至少其中之一中的所述滚动文字区域的步骤包括：从多个图像块所在行/列中决定所述多个文字图像块所在行/列，其中各个所述图像块所在行/列在所述滚动文字的所述方向上延伸，且各个所述图像块所在行/列包括一系列的图像块；以及移除孤立的文字图像块所在行/列并设定包括多个连续图像块所在行/列的区域为所述滚动文字区域。9.根据权利要求8所述的图像处理方法，其特征在于，其中从所述多个图像块所在行/列中决定所述多个文字图像块所在行/列的步骤包括：计算各个所述图像块所在行/列中的文字图像块的运动向量直方图；决定所述直方图的最大值；比较所述直方图的所述最大值与对应于所述滚动文字的所述运动向量的所述局部最大值以获得比较值；以及响应于决定所述比较值大于预设值，决定所述图像块所在行/列为所述文字图像块所在行/列的其中之一。10.根据权利要求1所述的图像处理方法，其特征在于，还包括：将所述插值帧中的所述滚动文字区域分为图像块，并根据所述插值帧的所述滚动文字像素图将各个所述图像块分类为文字图像块或背景图像块；以及对所述滚动文字区域的所述文字图像块分配所述滚动文字的所述运动向量，并对所述滚动文字区域的所述背景图像块分配背...

【专利技术属性】
技术研发人员：胡鹏媛，李永超，陈俊维，汪淳，黄鑫，
申请(专利权)人：联咏科技股份有限公司，
类型：发明
国别省市：中国台湾,71