一种摄像头实时快速字幕叠加的方法技术

本发明专利技术提供一种摄像头实时快速字幕叠加的方法，包括如下步骤：步骤1、根据字幕内容和字幕的字号大小，生成对应的点阵图像，再将点阵图像转化为点阵数据；步骤2、根据字幕颜色和字幕透明度将点阵数据转化为YUV数据；步骤3、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置；步骤4、根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像。本发明专利技术避开了复杂的图像处理和海量的内存拷贝，提高系统性能。

Method for real-time fast caption superposition of camera

The invention provides a method for fast real-time camera subtitles superimposed, comprising the following steps: 1, according to the caption content and subtitle font size, lattice to generate the corresponding image, then the dot matrix image into dot matrix data; step 2, according to the subtitle and subtitle color transparency dot data into YUV data; step 3 according to the video image display position range and user configuration of video cameras to capture the resolution, subtitles occupied, determine the specific location of the video image overlay subtitles superimposed to the camera to capture; step 4, according to YUV data and stack location subtitles superimposed to obtain video image with subtitles. The invention avoids complicated image processing and massive memory copy, and improves system performance.

【技术实现步骤摘要】
一种摄像头实时快速字幕叠加的方法
本专利技术涉及通信设备
，尤其涉及一种摄像头实时快速字幕叠加的方法。
技术介绍
在视频会议中，通常都是全国各地不同地方的人参加同一个视频会议，各个视频参与方并不是相互熟悉，当各个地方的视频画面合并成一个大的视频画面并呈现给所有参与方的时候，由于视频画面中缺少字幕，我们无法通过字幕的方式，将一些需要呈现给所有会议参与方的信息(如：会议参与方名字、所在公司、所在地方等)实时叠加到视频图像里面去，从而无法让各个参与方可以实时了解同本次视频会议相关的一些其他信息，如：会议日期、会议时间等。在视频会议中，由于摄像头捕捉到的视频数据格式主要有YUV、mjpg、h264等，而mjpg、h264解码后的格式也主要是YUV格式，因此，一些开源的视频图像处理软件对字幕的处理方法为：为了进行不同颜色和透明度的字幕叠加，先将YUV视频图像转化为RGB格式，然后将彩色字幕图像转化为RGB格式，再将转化后的彩色字幕图像和摄像头捕捉到的视频图像进行叠加，合并成一张图像，并进行透明度等相关处理，然后再将RGB转化回编码器需要的YUV图像格式，最后编码并传送出去。上述处理方式是对每一帧视频数据都进行了：“YUV转化为RGB，再将RGB转回YUV”的过程，两次图像转换对系统的消耗极大，仅仅每秒几十兆的内存拷贝就令一般的CPU无法承担，再加上图像处理，直接导致CPU无法满足高清图像的处理，并导致每秒能够处理的帧率大大下降，严重影响系统性能，降低视频质量。
技术实现思路
本专利技术要解决的技术问题，在于提供一种摄像头实时快速字幕叠加的方法，避开了复杂的图像处理和海量的内存拷贝，提高系统性能。本专利技术是这样实现的：一种摄像头实时快速字幕叠加的方法，包括如下步骤：步骤1、根据字幕内容和字幕的字号大小，生成对应的点阵图像，再将点阵图像转化为点阵数据；步骤2、根据字幕颜色和字幕透明度将点阵数据转化为YUV数据；步骤3、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置；步骤4、根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像。进一步地，所述步骤1具体为：步骤11、用户自行设定字幕的字形风格，加载相应的中文字库和英文字库，并选定Unicode编码格式；步骤12、用户从中文字库和英文字库中获取相应的字幕内容，将用户输入的字幕内容进行编码转化，统一转化为Unicode编码格式；步骤13、根据字幕需要显示的字号大小，结合摄像头捕捉到的视频图像的分辨率，计算出视频图像中每个字符的点阵大小；步骤14、根据计算出的点阵大小，将Unicode编码格式的字幕内容转化为点阵图像，再将点阵图像数字化，得到点阵数据；步骤15、根据点阵数据，确定出需要叠加的像素和不需要叠加的像素，并将需要叠加的像素标记为1，不需要叠加的像素标记为0。进一步地，所述步骤2具体为：步骤21、获取字幕需要显示的字幕颜色；步骤22、将字幕颜色对应的RGB值转化为对应的需要叠加的像素的YUV值，并将YUV值简化为Y1U1V1值；步骤23、获取字幕需要显示的字幕透明度和摄像头采集的视频图像的Y0U0V0值；步骤24、根据字幕透明度、Y0U0V0值和Y1U1V1值进行修正，得到修正后的Y2U2V2值；步骤25、根据计算出来的Y2U2V2值，将点阵数据转化为YUV数据。进一步地，所述步骤3具体为：步骤31、根据获取的字幕所要显示的区域、字幕的横向偏移量和字幕的纵向偏移量，确定出用户配置的字幕显示位置；步骤32、根据每个字符的点阵大小和字幕内容里的字符个数，确定出字幕占用的视频图像范围；步骤33、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的字幕显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置。本专利技术具有如下优点：本专利技术在叠加字幕时不再进行视频格式的转换，而是直接根据字幕的颜色得到这种颜色对应的YUV值，确定出字幕对应的YUV数据，然后找出字幕需要叠加到视频图像的叠加位置，根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像；这样直接避开了复杂的图像处理和海量的内存拷贝，直接减少CPU的消耗，提高系统性能，使相同性能的CPU可以处理更高分辨率和更大帧率的视频图像，从而可以得到更高清的视频质量。附图说明下面参照附图结合实施例对本专利技术作进一步的说明。图1为本专利技术一种摄像头实时快速字幕叠加的方法执行流程图。图2为本专利技术一种摄像头实时快速字幕叠加的方法中生成对应的点阵图像并转化为点阵数据的具体流程图。图3为本专利技术一种摄像头实时快速字幕叠加的方法中将点阵数据转化为YUV数据的具体流程图。图4为本专利技术一种摄像头实时快速字幕叠加的方法中确定叠加位置的具体流程图。图5为本专利技术一种摄像头实时快速字幕叠加的方法中数字0的点阵图像的示意图。具体实施方式为使得本专利技术更明显易懂，现以一优选实施例，并配合附图作详细说明如下。如图1所示，本专利技术的一种摄像头实时快速字幕叠加的方法，包括如下步骤：步骤1、根据字幕内容和字幕的字号大小，生成对应的点阵图像，再将点阵图像转化为点阵数据；步骤2、根据字幕颜色和字幕透明度将点阵数据转化为YUV数据；步骤3、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置；步骤4、根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像。如图2所示，所述步骤1具体为：步骤11、用户自行设定字幕的字形风格，加载相应的中文字库和英文字库，并选定Unicode编码格式；步骤12、用户从中文字库和英文字库中获取相应的字幕内容，将用户输入的字幕内容进行编码转化，统一转化为Unicode编码格式；步骤13、根据字幕需要显示的字号大小，结合摄像头捕捉到的视频图像的分辨率，计算出视频图像中每个字符(包括中文字符和英文字符)的点阵大小；其中，计算每个字符的点阵大小的计算方式为：每次摄像头采集出来的视频图像的分辨率可能是1280×720，也可能是1920×1080，也有可能是800*600等等。但是，无论摄像头采集出来的视频图像的分辨率如何改变，用户都希望字幕的每个汉字使用的大小是一个固定的物理尺寸。比如：一号字体的物理尺寸为9.17mm，如果我们的显示屏宽是27cm，那么每一行可以显示约30个字符。当视频图像的分辨率为1280*720时，每一个字符的点阵大小则为42x42(1280÷30≈42.67，这里直接取42)；当视频图像的分辨率为1920*1080时，每一个字符的点阵大小为64x64(1920÷30＝64)；步骤14、根据计算出的点阵大小，将Unicode编码格式的字幕内容转化为点阵图像，再将点阵图像数字化，得到点阵数据；其中，点阵图像转化为点阵数据的转化方式为：假设每个字符的点阵大小是8×8，我们使用数据0来说明点阵图像同点阵数据之间的关系。图5是数字0的点阵图像，与该数字0的点阵图像转化成相对应的点阵数据，转化后的点阵数据为：0x000x3c0x420x420x420x420x420x3c说明：上面是8×8的点阵图像(点阵图像上的一个点就对应本文档来自技高网...

【技术保护点】
一种摄像头实时快速字幕叠加的方法，其特征在于：包括如下步骤：步骤1、根据字幕内容和字幕的字号大小，生成对应的点阵图像，再将点阵图像转化为点阵数据；步骤2、根据字幕颜色和字幕透明度将点阵数据转化为YUV数据；步骤3、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置；步骤4、根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像。

【技术特征摘要】
1.一种摄像头实时快速字幕叠加的方法，其特征在于：包括如下步骤：步骤1、根据字幕内容和字幕的字号大小，生成对应的点阵图像，再将点阵图像转化为点阵数据；步骤2、根据字幕颜色和字幕透明度将点阵数据转化为YUV数据；步骤3、根据摄像头捕捉到的视频图像的分辨率、字幕占用的视频图像范围和用户配置的显示位置，确定字幕叠加到摄像头捕捉到的视频图像中具体的叠加位置；步骤4、根据YUV数据及叠加位置进行字幕的叠加，从而获得带有字幕的视频图像。2.根据权利要求1所述的一种摄像头实时快速字幕叠加的方法，其特征在于：所述步骤1具体为：步骤11、用户自行设定字幕的字形风格，加载相应的中文字库和英文字库，并选定Unicode编码格式；步骤12、用户从中文字库和英文字库中获取相应的字幕内容，将用户输入的字幕内容进行编码转化，统一转化为Unicode编码格式；步骤13、根据字幕需要显示的字号大小，结合摄像头捕捉到的视频图像的分辨率，计算出视频图像中每个字符的点阵大小；步骤14、根据计算出的点阵大小，将Unicode编码格式的字幕内容转化为点阵图像，再将点阵图像数字化，得到点阵数据；步骤15、根据点阵数据，确...

【专利技术属性】
技术研发人员：薛建清，杨新春，陈荣观，
申请(专利权)人：福建星网智慧科技股份有限公司，
类型：发明
国别省市：福建,35