计算机汉语有声影像资料自动加注汉语字幕的方法技术

本技术方案是一种计算机汉语有声影像资料自动加注汉语字幕的方法,属于计算机系统声音和图像数据处理技术领域。在将汉语语音影像资料转变成加注汉语字幕的影像资料时,首先将汉语有声语言的信号提取出来传给汉语语音识别模块并识别成汉语语音码或汉字,再将它们单独或对照文本字幕传输给视频或影像画面字幕叠加机,将字幕信息叠加在视频或影像画面上,并与相同同步信号的视频或影像画面合成在一起储存或同步输出。有了本技术方案可以使整个汉语信息可以在纯ASCII系统的计算机中进行处理，能够更方便地利用西方先进的西文软硬件资源来处理汉语字幕和图像叠加的技术问题，大大提高了汉语有声影像资料计算机信息处理的效率。

【技术实现步骤摘要】
【专利摘要】本技术方案是一种,属于计算机系统声音和图像数据处理
。在将汉语语音影像资料转变成加注汉语字幕的影像资料时,首先将汉语有声语言的信号提取出来传给汉语语音识别模块并识别成汉语语音码或汉字,再将它们单独或对照文本字幕传输给视频或影像画面字幕叠加机,将字幕信息叠加在视频或影像画面上,并与相同同步信号的视频或影像画面合成在一起储存或同步输出。有了本技术方案可以使整个汉语信息可以在纯ASCII系统的计算机中进行处理，能够更方便地利用西方先进的西文软硬件资源来处理汉语字幕和图像叠加的技术问题，大大提高了汉语有声影像资料计算机信息处理的效率。【专利说明】
本技术方案属于嵌入式或非嵌入式计算机系统声音和图像数据处理
，以下叙述中将嵌入式和非嵌入式计算机系统统称为计算机系统。
技术介绍
目前市面上的汉语有声影像资料的汉字字幕叠加，一般通过人工方式将汉语有声影像资料中的汉语转换成汉字，再交给视频画面或影像画面字幕叠加机将表达汉语意思的汉字字幕叠加在视频画面或影像画面上，由于存在大量的没有汉字字幕的汉语有声影像资料，因此，采用人工转换汉字字幕的方式费工费时，而且随着数字有声影像技术的出现，特别是计算机系统用于处理视频影像资料的技术出现，越来越需要有一种能自动根据汉语语音转换成汉语字幕的技术出现，而且这种能自动根据汉语语音转换成汉语字幕的技术不但能在带汉字系统的计算机系统中运行，还能在不带汉字系统而只带128个字符的ASCII码系统的以美国为代表的西方国家的计算机系统中运行，以满足世界互联网的日益广泛的运用和云计算、物联网以及世界各地汉语热出现的新形势的需要。
技术实现思路
本技术方案的提出就是为了解决上述出现这些问题。具体来说本技术方案通过采用以下的来解决上述出现的问题: 在将汉语有声影像资料自动加注汉语字幕时，首先通过现有计算机软件做好影像资料中视频画面或影像画面与对·应的汉语有声语言的音频信号同步信号标志，然后将带同步信号标志的有声语言的音频信号提取出来传给计算机中的汉语语音识别模块，汉语语音识别模块将汉语语音识别成带与所识别的汉语语音相同同步信号标志的汉语字幕，该带同步信号标志的汉语字幕然后传输给传统的视频画面或影像画面字幕叠加机，根据汉语字幕与视频画面或影像画面同步信号标志的对应关系将字幕信息叠加在视频画面或影像画面上并合成在一起储存或输出。上述的同步信号标志可以是现有技术的视频画面或影像画面与对应的汉语有声语言的音频信号同步时间戳标志，所述的汉语字幕可以是汉字也可以是汉语语音码，汉语语音码或汉字能够单独或者汉语语音码与汉字、汉语拼音、少数民族文字对照叠加在视频画面或影像画面上并合成在一起储存或输出。上述所述的汉语语音码是以单词为单位，这里将单个汉字看作单音节词，根据组成该单词的每个音节的《汉语拼音方案》中的拼音，用且仅用26个拉丁字母对汉语拼音的声母、介母、韵母、声调采取先编码再依次按“声码+介码+韵码+调码兼隔音节符号”的顺序编码拼写，并通过得到的语音码的编码直接表达汉语信息，当直接用语音码编码来表示汉语信息时，其标点符号的用法同英文的标点符号的用法相同，编码时同一个单词的多个音节不用空格连续编码，单词与单词之间要有空格隔开。由于本技术方案采用26个拉丁字母表示的汉语语音码来表达汉语信息，且当直接用语音码编码来表示汉语信息时，其标点符号的用法同英文的标点符号的用法相同，这样就保证了汉语信息的表达连标点符号在内都与ASCII码完全一致，也即与ASCII码100%兼容，这样上述汉语语音识别模块，由于处理的汉语信息是用与ASCII码完全一致的汉语语音码来表示的，这样就使得该模块可以在ASCII码系统的计算机中运行，因此，确保了可以在ASCII码系统的计算机中运行，上述问题得以解决。有了本技术方案以后，就能通过计算机自动根据汉语语音转换成汉语字幕大大提高了有声影像信息处理的效率，而且这种能自动根据汉语语音转换成汉语字幕的技术不但能在带汉字系统的计算机系统中运行，而且还能再不带汉字系统只带128个字符的ASCII码系统的以美国为代表的西方国家的计算机系统中运行，这样能够更方便地利用西方先进的西文软硬件资源来处理汉语字幕和图像叠加的技术问题。【具体实施方式】下面结合实施例对本专利技术的【具体实施方式】作进一步的说明。(一)本技术方案所采用的汉语语音码的每一音节声、韵、调的编码方法采用以下的方法: 注:括号内的符号均为《汉语拼音方案》中的汉语拼音符号，以下简称为汉语拼音符号，不带括号的字母为本方案所采用的汉语语音码的每一音节声、韵、调的编码符号，以下将下列对照表简称为码表； 1、声码的编码符号采用与汉语拼音方案基本一致的声母的字母符号，比如采用下面这种声码的编码形式: b:(b) P: (P) m:(m) f:(f) d:(d)t:(t) η:(n) 1:(1) g:(g) k:(k) h:(h) j: (zh), (j)q: (ch), (q)x: (sh), (x) r: (r) z:(z) c:(c) s:(s) y:(y) w:(w) 2、汉语拼音介母(U)采用26个拉丁字母中的一个字母表示，比如采用下面这种介码的编码形式: 1:(i) u:(u) y:(U) 3、韵码的编码，对单韵母除(U)采用26个拉丁字母中的一个字母表示外，其它采用与汉语拼音相同 的字母符号，汉语拼音的复合韵母只要是采用辅音字母来编码都是可以的，比如采用下面的这种字母符号来对汉语拼音的韵母进行编码: a: (a) o:(o) e: (e) i: (i) u: (u) y: (ii) k:(ao) c:(ai) s: (an) x: (ou) w: (ei) n:(en) z:(ua) l:(uo) b: (ang) d:(ong) p: (eng) q: (ing) g: (ng) er: (er) r: (i) 4、调码的编码除采用一个汉语不用的辅音字母V表示汉语拼音的上声(V)外，其它采用元音字母来表示汉语的声调，比如采用下面的字母来对汉语拼音的声调进行编码: a:(―)阴平e:(/)阳平 v:(V)上声 u:(\)去声 ο:(不标)轻声 (二)利用上述编码的汉语语音码汉语信息表示采用如下的方法: 以单词为单位，这里将单个汉字看作单音节词，根据组成该单词的每个音节的《汉语拼音方案》中的拼音，依次按“声码+介码+韵码+调码兼隔音节符号”的顺序编码，同一个单词的多个音节不用空格隔开连写，单词与单词之间的编码用空格隔开，当汉语信息表示处于汉语语音码状态时，其六种点号，七种标号和一个移行号采用与英文相同的形式； 这里由于将独立运用的汉字看作单音节词，因此，本专利技术所采用的汉字编码的方法和汉语单词音节编码的方法相同，在本专利技术中采用单词音节编码按词连写后得到单词编码，我们将由若干个单词组成的一组词称为词组，本专利技术所采用词组的编码同汉语句子的编码相同，由于单词可以表示词组和汉语句子，因此在本专利技术中所采用的词组的编码和汉语句子的编码都可以通过单词的编码实现，而不需要对词组和汉语句子另外制定一套专门的编码，一般在整句整篇以词为单位表示汉语信息时，在理解本文档来自技高网...

【技术保护点】
一种计算机汉语有声影像资料自动加注汉语字幕的方法，其特征是: 在将汉语有声影像资料自动加注汉语字幕时,首先通过现有计算机软件做好影像资料中视频画面或影像画面与对应的汉语有声语言的音频信号同步信号标志,然后将带同步信号标志的有声语言的音频信号提取出来传给计算机中的汉语语音识别模块，汉语语音识别模块将汉语语音识别成带与所识别的汉语语音相同同步信号标志的汉语字幕，该带同步信号标志的汉语字幕然后传输给传统的视频画面或影像画面字幕叠加机，根据汉语字幕与视频画面或影像画面同步信号标志的对应关系将字幕信息叠加在视频画面或影像画面上并合成在一起储存或输出。

【技术特征摘要】

【专利技术属性】
技术研发人员：苗玉水，
申请(专利权)人：上海能感物联网有限公司，
类型：发明
国别省市：上海;31