字幕图像的处理方法和装置制造方法及图纸

本申请公开了字幕图像的处理方法和装置。所述方法的一具体实施方式包括：获取第一字幕图像的放大倍数；根据放大倍数，对第一字幕图像的YUV分量进行边缘方向的插值上采样，得到第一YUV分量；根据放大倍数，对第一字幕图像的透明度分量进行插值上采样，得到第一透明度分量；合成第一YUV分量与第一透明度分量，得到第二字幕图像；基于第二字幕图像，得到用于显示的图像。该实施方式使得用于显示的字幕边界平滑，减少了锯齿和模糊现象，提高了字幕的精细程度。

【技术实现步骤摘要】
字幕图像的处理方法和装置
本申请涉及计算机
，具体涉及计算机图像处理领域，尤其涉及字幕图像 的处理方法和装置。
技术介绍
随着高清和超高清电视的普及，当在高清或超高清电视上播放视频时，一些以图 片形式显示的视频字幕的分辨率比较低，为了给观众更好的视觉效果，就需要对字幕进行 相应的放大。 现有技术主要有两类放大方法：一类方法是利用预存放大后的字体库对字幕进 行放大，当接收到字幕信息后对字幕中的字进行识别并从字体库里找到相应的字体进行显 示；另一类方法是把字幕当成图像进行放大，现有技术大多是采用双线性或双立方插值对 字幕进行放大。
技术实现思路
上述技术中，利用预存放大后的字体库对字幕进行放大的技术，由于字体样式多 样化，既包含中文又有外文，将所有不同种类语言以及语言的不同字体样式都进行预存储 是不现实的，同时与字体库中的字体进行匹配时的准确度也是待考虑的一个问题。采用双 线性或双立方插值对字幕进行放大的技术，是对字幕进行简单的插值，由于字幕本来分辨 率较低，边界比较粗糙，如果进行简单的插值，视觉效果较差，存在锯齿和模糊现象，特别是 在放大倍率较大，例如放大倍率> =3时，锯齿和模糊现象更为严重。 本申请提供了字幕图像的处理方法和装置。 -方面，本申请提供了一种字幕图像的处理方法，所述方法包括：获取第一字幕图 像的放大倍数；根据所述放大倍数，对所述第一字幕图像的YUV分量进行边缘方向的插值 上采样，得到第一 YUV分量；根据所述放大倍数，对所述第一字幕图像的透明度分量进行插 值上采样，得到第一透明度分量；合成所述第一 YUV分量与所述第一透明度分量，得到第二 字幕图像；基于所述第二字幕图像，得到用于显示的图像。 在某些实施方式中，所述根据所述放大倍数，对所述第一字幕图像的YUV分量进 行边缘方向的插值上采样，得到第一 YUV分量包括：对所述第一字幕图像的YUV分量进行边 缘方向的插值上采样、修正和下采样，得到预处理后的YUV分量；对所述预处理后的YUV分 量进行边缘方向的插值上采样，得到所述第一 YUV分量。 在某些实施方式中，所述进行边缘方向的插值上采样包括：将待插值图像的每个 像素点作为一次插值基准像素点，获取位于一次插值像素点0°、45°、90°和135°方向 的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述一次插值像素点；将 所述待插值图像的像素点和所述一次插值像素点作为二次插值基准像素点，获取位于二次 插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方 向进行插值，得到所述二次插值像素点。 在某些实施方式中，所述获取位于一次插值像素点0°、45°、90°和135°方向 的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述一次插值像素点包 括：若所述插值方向在所述一次插值像素点的45°或135°方向，对位于所述插值方向上 且分别与所述一次插值像素点相邻的两个一次插值基准像素点进行插值，得到所述一次插 值像素点；若所述插值方向在所述一次插值像素点的0°或90°方向，对与所述一次插值 像素点相邻的四个一次插值基准像素点进行插值，得到所述一次插值像素点。 在某些实施方式中，所述获取位于二次插值像素点〇°、45°、90°和135°方向 的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到二次插值像素点包括：若 所述插值方向在所述二次插值像素点的45°或135°方向，对与所述二次插值像素点相邻 的四个二次插值基准像素点进行插值，得到所述二次插值像素点；若所述插值方向在所述 二次插值像素点的0°或90°方向，对位于所述插值方向上且分别与所述二次插值像素点 相邻的两个二次插值基准像素点进行插值，得到所述二次插值像素点。 在某些实施方式中，在所述对所述第一字幕图像的YUV分量进行边缘方向的插值 上采样之后进行修正包括：在进行插值上采样之后的第一字幕图像中，获取原第一字幕图 像的像素点在水平方向的梯度Gl和在垂直方向的梯度G2 ;建立梯度-权值映射模型；基于 所述G1、G2和所述梯度-权值映射模型，得到原第一字幕图像的像素点水平方向的权值Wl 和垂直方向的权值W2 ;基于所述Wl、W2和以所述第一字幕图像为待插值图像的二次插值像 素点，加权修正所述原第一字幕图像的像素点。 在某些实施方式中，所述基于所述第二字幕图像，得到用于显示的图像包括：对所 述第二字幕图像进行反向投影（IBP)修正，得到第三字幕图像，基于所述第三字幕图像，得 到所述用于显示的图像。 在某些实施方式中，所述对所述第二字幕图像进行反向投影（IBP)修正，得到第 三字幕图像包括：获取初始估计图像的模拟低分辨率图像，所述初始估计图像为所述第二 字幕图像；比较所述模拟低分辨率图像与所述第一字幕图像；根据比较结果获取模拟误差 图像；根据所述模拟误差图像，对所述第二字幕图像进行迭代修正，得到第三字幕图像。 在某些实施方式中，所述基于所述第三字幕图像，得到所述用于显示的图像包括： 对所述第三字幕图像进行双边滤波，得到第四字幕图像；将所述第四字幕图像作为所述用 于显示的图像。 在某些实施方式中，所述对所述第三字幕图像进行双边滤波，得到第四字幕图像 包括：通过空间域滤波器对所述第三字幕图像的水平方向滤波，得到一次滤波后的字幕图 像，对所述一次滤波后的字幕图像的垂直方向滤波，得到空间滤波后的字幕图像；在空间滤 波后的字幕图像中，对以待滤波像素点为中心且边长r的窗口内的每一个像素点与所述待 滤波像素点，求取实际的差值的绝对值；预先建立像素域滤波器的权值与所有差值的绝对 值的对应表；基于所述实际的差值的绝对值和所述对应表，对所述空间滤波后的字幕图像 的每一个像素点，进行像素域滤波，得到第四字幕图像。 在某些实施方式中，所述第一字幕图像包括：原始字幕图像；和/或用户选择的原 始子辱图像中的感兴趣区域。 在某些实施方式中，所述放大倍数包括：视频全屏播放的尺寸与视频原始尺寸的 比值；和/或接收到的用户设定的放大倍数。 第二方面，本申请提供了一种字幕图像的处理装置，所述装置包括：获取单元，用 于获取第一字幕图像的放大倍数；YUV分量上采样单元，用于根据所述放大倍数，对所述第 一字幕图像的YUV分量进行边缘方向的插值上采样，得到第一 YUV分量；透明度分量上采样 单元，用于根据所述放大倍数，对所述第一字幕图像的透明度分量进行插值上采样，得到第 一透明度分量；合成单元，用于合成所述第一 YUV分量与所述第一透明度分量，得到第二字 幕图像；生成单元，用于基于所述第二字幕图像，得到用于显示的图像。 在某些实施方式中，所述YUV分量上采样单元包括：预处理单元，用于对所述第一 字幕图像的YUV分量进行边缘方向的插值上采样、修正和下采样，得到预处理后的YUV分 量；预处理后的YUV分量上采样单元，用于对所述预处理后的YUV分量进行边缘方向的插值 上采样，得到所述第一 YUV分量。 在某些实施方式中，所述进行边缘方向的插值上采样包括：将待插值图像的每个 像素点作为一次插值基准像素点，获取位于一次本文档来自技高网...

【技术保护点】
一种字幕图像的处理方法，其特征在于，所述方法包括：获取第一字幕图像的放大倍数；根据所述放大倍数，对所述第一字幕图像的YUV分量进行边缘方向的插值上采样，得到第一YUV分量；根据所述放大倍数，对所述第一字幕图像的透明度分量进行插值上采样，得到第一透明度分量；合成所述第一YUV分量与所述第一透明度分量，得到第二字幕图像；基于所述第二字幕图像，得到用于显示的图像。

【技术特征摘要】
1. 一种字幕图像的处理方法，其特征在于，所述方法包括： 获取第一字幕图像的放大倍数； 根据所述放大倍数，对所述第一字幕图像的YUV分量进行边缘方向的插值上采样，得 到第一 YUV分量； 根据所述放大倍数，对所述第一字幕图像的透明度分量进行插值上采样，得到第一透 明度分量； 合成所述第一 YUV分量与所述第一透明度分量，得到第二字幕图像； 基于所述第二字幕图像，得到用于显示的图像。2. 根据权利要求1所述的方法，其特征在于，所述根据所述放大倍数，对所述第一字幕 图像的YUV分量进行边缘方向的插值上采样，得到第一 YUV分量包括： 对所述第一字幕图像的YUV分量进行边缘方向的插值上采样、修正和下采样，得到预 处理后的YUV分量； 对所述预处理后的YUV分量进行边缘方向的插值上采样，得到所述第一 YUV分量。3. 根据权利要求2所述的方法，其特征在于，所述进行边缘方向的插值上采样包括： 将待插值图像的每个像素点作为一次插值基准像素点，获取位于一次插值像素点0°、 45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到 所述一次插值像素点； 将所述待插值图像的像素点和所述一次插值像素点作为二次插值基准像素点，获取位 于二次插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为 插值方向进行插值，得到所述二次插值像素点。4. 根据权利要求3所述的方法，其特征在于，所述获取位于一次插值像素点0°、45°、 90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述一 次插值像素点包括： 若所述插值方向在所述一次插值像素点的45°或135°方向，对位于所述插值方向上 且分别与所述一次插值像素点相邻的两个一次插值基准像素点进行插值，得到所述一次插 值像素点； 若所述插值方向在所述一次插值像素点的0°或90°方向，对与所述一次插值像素点 相邻的四个一次插值基准像素点进行插值，得到所述一次插值像素点。5. 根据权利要求3或4所述的方法，其特征在于，所述获取位于二次插值像素点0°、 45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到 所述二次插值像素点包括： 若所述插值方向在所述二次插值像素点的45°或135°方向，对与所述二次插值像素 点相邻的四个二次插值基准像素点进行插值，得到所述二次插值像素点； 若所述插值方向在所述二次插值像素点的0°或90°方向，对位于所述插值方向上且 分别与所述二次插值像素点相邻的两个二次插值基准像素点进行插值，得到所述二次插值 像素点。6. 根据权利要求3至5之一所述的方法，其特征在于，在所述对所述第一字幕图像的 YUV分量进行边缘方向的插值上采样之后进行修正包括： 在进行插值上采样之后的第一字幕图像中，获取原第一字幕图像的像素点在水平方向 的梯度G1和在垂直方向的梯度G2 ; 建立梯度-权值映射模型； 基于所述Gl、G2和所述梯度-权值映射模型，得到原第一字幕图像的像素点水平方向 的权值W1和垂直方向的权值W2 ; 基于所述Wl、W2和以所述第一字幕图像为待插值图像的二次插值像素点，加权修正所 述原第一字幕图像的像素点。7. 根据权利要求1至6之一所述的方法，其特征在于，所述基于所述第二字幕图像，得 到用于显示的图像包括： 对所述第二字幕图像进行反向投影（IBP)修正，得到第三字幕图像，基于所述第三字 幕图像，得到所述用于显示的图像。8. 根据权利要求7所述的方法，其特征在于，所述对所述第二字幕图像进行反向投影 (IBP)修正，得到第三字幕图像包括： 获取初始估计图像的模拟低分辨率图像，所述初始估计图像为所述第二字幕图像； 比较所述模拟低分辨率图像与所述第一字幕图像； 根据比较结果获取模拟误差图像； 根据所述模拟误差图像，对所述第二字幕图像进行迭代修正，得到第三字幕图像。9. 根据权利要求7所述的方法，其特征在于，所述基于所述第三字幕图像，得到所述用 于显示的图像包括： 对所述第三字幕图像进行双边滤波，得到第四字幕图像； 将所述第四字幕图像作为所述用于显示的图像。10. 根据权利要求9所述的方法，其特征在于，所述对所述第三字幕图像进行双边滤 波，得到第四字幕图像包括： 通过空间域滤波器对所述第三字幕图像的水平方向滤波，得到一次滤波后的字幕图 像，对所述一次滤波后的字幕图像的垂直方向滤波，得到空间滤波后的字幕图像； 在空间滤波后的字幕图像中，对以待滤波像素点为中心且边长r的窗口内的每一个像 素点与所述待滤波像素点，求取实际的差值的绝对值； 预先建立像素域滤波器的权值与所有差值的绝对值的对应表； 基于所述实际的差值的绝对值和所述对应表，对所述空间滤波后的字幕图像的每一个 像素点，进行像素域滤波，得到第四字幕图像。11. 根据权利要求1所述的方法，其特征在于，所述第一字幕图像包括： 原始字幕图像；和/或 用户选择的原始字幕图像中的感兴趣区域。12. 根据权利要求11所述的方法，其特征在于，所述放大倍数包括： 视频全屏播放的尺寸与视频原始尺寸的比值；和/或 接收到的用户设定的放大倍数。13. -种字幕图像的处理装置，其特征在于，所述装置包括： ...

【专利技术属性】
技术研发人员：张义轮，侯天峰，朱春波，
申请(专利权)人：三星电子中国研发中心，三星电子株式会社，
类型：发明
国别省市：江苏;32