多媒体内容搜寻方法技术

一种多媒体内容搜寻方法，首先撷取多媒体文件的字幕信息；辨识字幕信息的字幕图片，形成可检索的文字字幕片段；将文字字幕片段及其出现时间，形成字幕索引档；检索包含关键字串的字幕片段列表；多媒体转跳至列表中字幕片段出现时间进行播放检视；未搜寻到目标影音片段，键入其他关键字串重新检索，搜寻目标影音片段，以提升搜寻效率。

【技术实现步骤摘要】

本专利技术有关一种影音片段搜寻方法，尤其是关于具有字幕的多媒体，利 用关键字串，快速搜寻多媒体内容中所需影音片段的方法。
技术介绍
随着多媒体科技进步，高画质影音的时代已经来临，影音多媒体将从4. 7GB的DVD影音多媒体，迅速提升至25GB(单层)，甚至50GB(双层)的BD (蓝 光)多媒体，容量越来越大，需要更快速的搜寻方法，才能有效率找到多媒体 中所需的影音片段。如图1所示，为先前技术多媒体内容的搜寻方法的流程。由于先前技术 多媒体的影音档是利用时间来记录影音视频序列，并将影音视频区分成数节 的场景段落形成目录，供使用者点选跳换播放。使用者亦可沿着影音一见频的 时间轴前进或后动快速连续播放，以搜寻所需影音片段。为了快速搜寻，先 前技术多媒体内容的搜寻方法，首先在步骤Pl进行播放多媒体，进入步骤 P2,当画面出现场景段落目录时，使用者藉由记忆，大致选择可能包含所需 影音片段的场景段落，转跳至该场景段落进行播放。接着，在步骤P3利用快速键沿着时间轴前进或后退移动，快速播放影音 视频。进入步骤P4，以目视——检视播放的影音视频，搜寻需求的目标影音 片段。再进入步骤P5，确认是否找到目标影音片段？假如已找到，则恢复多 媒体正常播放，以观赏所需的影音视频，假如未找到目标影音片段，则回到 步骤P2，重复进行搜寻步骤，直到找到目标影音片段或放弃搜寻才停止。然而，先前技术多媒体利用时间来记录影音视频序列， 一般使用者对相 似的时间序列记录容易产生混淆，无法详细记忆影音片段在几时几分几秒出 现。因此先前技术的搜寻方法，单凭记忆及盲目地毯式的搜寻方式，对容量 越来越大的影音文件，搜寻目标影音片段如同大海撈针，需要数倍的时间， 甚至徒劳无功无法找到目标影音片段，搜寻方法并无效率。虽然另有先前技 术藉由划面、声波等比对方法进行搜寻，但过程太过复杂，使用上亦不方便。4因此，先前技术多媒体内容的搜寻方法在搜寻效率上，仍有问题亟待解决。
技术实现思路
本专利技术的目的在提供一种，藉由撷取多媒体字幕信 息，再转化成为可搜寻的索引档，以加快搜寻速度。本专利技术另 一 目的在提供一种，利用搜寻出多媒体字 幕中关键字串，转跳至出现关键字串相对时间的影音视频进行播放，提高搜 寻效率。本专利技术再一目的在提供一种，以自动播放模式或点 选播放模式，进行播放检视搜寻结果，增加操作选择。为了达到前述专利技术的目的，本专利技术的，首先撷取多媒体文件的字幕信息；辨识字幕信息的字幕图片，形成可检索的文字字幕片 段；将文字字幕片段及其字幕信息的出现时间，依序形成字幕索引档；在字 幕索引档检索关键字串，将包含该关键字串的字幕片段列表；多媒体转跳至 列表中字幕片段出现时间进行播放检视；如未搜寻到目标影音片段，键入其 他关键字串重新检索，以搜寻目标影音片段。本专利技术的播放检视检索列表中字幕片段，包含自动 播放模式与点选播放模式两种模式供选择。选择自动播放模式时，自动依序 转跳至检索列表中各字幕片段的出现时间，接续进行播放检视。而选择点选 播放模式时，由使用者点选检索列表中字幕片段，再转跳至该字幕片段的出 现时间，进行播放^r一见，播放冲企视完成后，检查点选完成，未点选完成则继 续点选下一字幕片段，进行播放检视，直到点选完成。附图说明图1为先前技术多媒体内容的搜寻方法的流程图。图2为DVD多:! 某体文件内容的示意图。图3为本专利技术字幕索引档的示意图。图4为本专利技术多々某体内容搜寻方法的流程图。图5为本专利技术选择播放字幕片段模式的流程图。主要元件符号说明SI开启多媒体步骤S2撷取字幕信息步骤S3辨识字幕步骤S4形成字幕索引档步骤S5检索关键字串步骤S6相符字幕片段列表步骤S7播放字幕片段步骤S8找到目标影音步骤S9正常播放步骤Tl选择播放模式步骤T2自动播放模式步骤T3自动播放检视步骤T4点选播放模式步骤T5点选步骤T6播放点选检视步骤T7点选完成步骤具体实施例方式有关本专利技术为达成上述目的，所采用的技术手段及其功效，兹举较佳实 施例，并配合附图加以说明如下。虽然一般使用者的记忆对所需影音片段出现的时间容易产生混淆，但对 特别画面出现的声音及对话都会记忆深刻。因此，本专利技术多媒体内容搜寻方 法，主要是将多媒体的字幕，形成可检索的方式，让使用者以较容易忆及的 对话字串，作为搜寻多媒体内容中所需影音片段的方法。一般多媒体的内容将字幕与影音视频文件分开存放。以DVD多媒体文件 为例，请参考图2,为DVD多媒体的文件内容。DVD多媒体一般包含影像资料 夹(VIDEO-TS)及音响资料夹(AUDI0-TS)等两个资料夹，提供影音视频。其 中影像资料夹又包含VOB、 IFO及BUP等三个资料夹，VOB资料夹内含浮见频、 音频及字幕(多国语言)信息，IF0资料夹则为播放的执行档，而BUP资料夹 是IFO资料夹的备份档。因此DVD多媒体的字幕存放在VOB资料夹中，然而 字幕是以图片的形式储存，无法进行文字检索。为了让字幕图片可检索，必需从V0B资料夹中擷取字幕信息。依字幕出现的时间期间序列，将字幕图片——经由文字辨识软件加以辨认，转换成可 检索的文字。再将每一对话字幕片段出现的时间期间，与文字字幕一一相对编辑，如图3所示，形成本专利技术的字幕索引档。字幕索引档包含可检索的字 幕片段，及其相对出现在画面的启始时间及终止时间。字幕索引档以较小时 间期间的每一句对话字幕片段作为单位。因此只要确定某一字幕片段，即可 藉由DVD多J 某体以时间为记录轴的特性，利用字幕片段的启始时间，让DVD 多媒体转跳至该字幕片段的启始时间进行播放，且在字幕片段的终止时间停 才各画面。确定某一字幕片段，是利用所需影音片段中，所忆及的相关字串，作为 检索的关键字串，于建立的字幕索引档中，进行字串搜寻。由于相同的字串 可能出现在DVD多媒体中的多个字幕片段中，因此检索结果将列出所有包含 有该字串的多个字幕片段。再由DVD多媒体转跳至各字幕片段的启始时间进 行播放至终止时间，让使用者一一检视，以搜寻出所需影音片段。请再参图3,举例说明字幕的检索方法，假如使用者对于DVD多媒体影 片中出现的京城夕照影音片段，相当感兴趣，想要重新欣赏该画面，即可藉 由回想京城夕照影音片段的场景对话，而以「到达京城」作为关键字串，就 可由字幕索引档中找到「我们很快就到达京城」的字幕片段，并以其启始时 间r01: 04: 10， 806」直接使DVD多i某体转跳至记录时间「 01: 04: 10,806」 进行播放，且停格在其终止时间「01: 04: 11，864」，等待使用者后续播放的 选择。因此多媒体就可以细分至每一句字幕片段为单位，作为检索的标的， 而可快速转跳至所需的画面播放，以提高搜寻效率。如图4所示，为本专利技术的流程。本专利技术利用多々某体 的字幕作为内容搜寻的详细步骤说明如下首先在步骤S1，开启多媒体文件， 进入步骤S2，从多媒体文件的VOB资料夹中，撷取字幕信息。再进入步骤S3， 将图片的字幕——经由文字辨识软件加以辨认，转换成可检索的文字字幕片 段形式。在步骤S4，依撷取字幕信息中字幕片段出现的时间先后，将字幕片 段出现的时间启始及终止期间，与可检索的文字字幕片段——相对排列编辑， 以形成字幕索引档。接着，进入步骤S5，键入所需影音片段的相关本文档来自技高网...

【技术保护点】
一种多媒体内容搜寻方法，其步骤包含：　（１）撷取多媒体文件的字幕信息；　（２）辨识字幕信息的字幕图片，形成可检索的文字字幕片段；　（３）将文字字幕片段及其字幕信息的出现时间，形成字幕索引档；　（４）在字幕索引档检索关 键字串，将包含该关键字串的字幕片段列表；　（５）多媒体转跳至列表中字幕片段出现时间进行播放检视；以及　（６）搜寻目标影音片段。

【技术特征摘要】

【专利技术属性】
技术研发人员：康文俊，李启志，
申请(专利权)人：广明光电股份有限公司，
类型：发明
国别省市：71[中国|台湾]