用来对视频流所载的运动视频节目编索引的方法技术

本发明专利技术提供一种用来对视频流所载的运动视频节目编索引的方法。该方法包含有：通过由进行镜头检测来对该视频流的多个镜头暂时地编索引；至少依据该镜头检测过程中被编索引的镜头中的至少一部分的低阶视觉特征，从该至少一部分提取该运动视频节目的多个镜头，通过让被提取的镜头仍暂时地维持着被编索引的状态；以及通过比较被提取的镜头中的一镜头与至少被提取的镜头中的其它镜头来确认多个镜头，通过被确认的镜头仍维持着被编索引的状态，用于该运动视频节目的至少一部分的回放。

【技术实现步骤摘要】

本专利技术涉及视频处理(video processing),尤其涉及一种用来对视频流 (video stream )所载的运动-见步页节目(sports video program )编索引(indexing) 的方法。
技术介绍
在运动视频节目中，某些片段(segment)或镜头(shot)相较于其它部 分特别地引人兴趣，例如 一场篮球赛中篮球队员投篮的时刻，或是一场棒 球赛中击球手挥棒出击的时刻。为了准备或制作该运动视频节目的精华版 (highlight version )，可能必须在视频编辑(video editing)上耗费许多时间。虽然当今用来执行于个人电脑(personal computer, PC )的数位:规频编辑 应用软件(applicationtools)已在市面上买得到，但利用这种应用软件的使用 者仍需要耗费许多时间、精神来手动地进行视频编辑，这是因为这类的应用 软件的典型作法只不过是提供一种使用者界面让使用者指示应用软件该做什 么(例如将使用者所裁切与选择的多个片段加以组合)，而非4是供一种自动 编辑功能。
技术实现思路
因此本专利技术的目的的一在于提供用来一种对视频流所载的运动视频节目 编索引的方法。本专利技术的较佳实施例中提供一种用来对视频流所载的运动视频节目编索 引的方法。该方法包含有通过由进行镜头检测(shotdetection)来对该视频 流的多个镜头暂时地编索引；至少依据该镜头检测过程中被编索引的镜头中 的至少 一部分的低阶一见觉特征(low level visual feature)，从该至少 一部分提 取(extracting)该运动视频节目的多个镜头，通过让被提取的镜头仍暂时地 维持着被编索引的状态；以及通过比较^皮提取的镜头中的一镜头与至少被提取的镜头中的其它镜头来确认(validating)多个镜头，通过被确认的镜头仍 维持着被编索引的状态，以用于该运动视频节目的至少一部分的回放 (playback )。图1为本专利技术一实施例中所提供的一种用来对视频流所载的运动视频节 目编索引的方法的流程图。图2为图1所示的提取步骤在本专利技术一实施例中的实施细节的流程图。 图3为图1所示的确认步骤在本专利技术一实施例中的实施细节的流程图。 图4为图1所示的提取步骤于在专利技术一实施例中的实施细节的流程图。 图5为图1所示的提取步骤于在专利技术一实施例中的实施细节的流程图。主要元件符号说明 900 方法 900S, 900E, 910, 920, 930, 940， 950, 步骤 930S， 930E， 932， 934, 936,具体实施方式请参考图1与图2，图1为本专利技术一实施例中所提供的一种用来对视频 流所载的运动视频节目编索引的方法900的流程图，其中图2为图1所示的 步骤930于本实施例中的实施细节的流程图。通过由将方法900应用于该视 频流，该运动视频节目可被自动地编索引，其中当该视频流所载的视频资料 被筛选超过一次时，被编索引的镜头的数量可被改变。于是，本专利技术的目的， 例如自动地产生该运动视频节目的精华版，可以通过由利用方法900来达成。在步骤910中，通过由进行镜头检测来对该视频流的多个镜头暂时地编 索引。依据本实施例，镜头检测是通过由检测镜头变化来实施，例如检测图 框(frame)之间的亮度差异(luminance difference )。另外，由每一镜头的多附图说明<table>table see original document page 6</column></row><table>比较结果总和 个图框中可选出一钥框(key frame)来代表该镜头，例如每一镜头的第一 图框可被选为该镜头的钥框。由于镜头检测技术为同业所熟知，故不赘述步 骤910的实施细节。在此，在步骤910中被暂时地编索引的镜头被视为供后 续步骤使用的候选镜头。在步骤920中，进行广告检测(commercial detection)以将在步骤910 中所进行的镜头检测过程中被编索引的其它镜头中筛出(sieve out)该运动视 频节目的多个镜头。由于进行广告检测的结果，该视频流所载的广告内容均 被滤除。依据本专利技术的某些实施例，步骤920可为某些状况下选用的步骤， 尤其是在该视频流不存在广告内容的状况下。在步骤920中所进行的广告才全 测可通过由同业所熟知的广告检测技术来实施，故不赘述其细节。在此，这 样被滤除的镜头已被解除上述被编索引的状态，而这样^f皮筛出的镜头仍暂时 地维持着上述被编索引的状态，因此，这样被筛出的镜头被视为可供下一步 骤(于本实施例即步骤930)使用的候选镜头。在步骤930中，至少依据该镜头检测过程中被编索引的镜头中的至少一 部分的低阶视觉特征，例如色阶统计数据(histogram data),从该至少一部分 提取该运动视频节目的多个镜头，通过让被提取的镜头仍暂时地维持着上述 被编索引的状态。依据本实施例的不同实施选择，该等低阶视觉特征可为色 彩色阶统计(color histogram)或亮度色阶统计(luminance histogram)的色 阶统计数据。依据本专利技术的不同实施例，该等低阶^L觉特征可为上述该至少 一部分的像素差异比较结果(pixel difference comparison result)或离散余弦转 4臭系凄t ( discrete cosine transform coefficient, DCT coefficient )。依据图l所示的实施例，由于有进行该广告检测，该镜头检测过程中被 编索引的镜头中的该至少一部分在此被定义为该等净皮筛出的镜头。在本实施 例中，步骤930包含有详细步骤，例如步骤932、 934、与936,用来进行稳 定片段提取(stable segment extraction)以及低复杂度片段提取(low complexity segment extraction), 如图2所示。在步骤932中，该稳定片段提取是依据多个色阶统计差异(histogram difference, HDs )来进行。依据本实施例，首先通过由对每一镜头中的多个色 阶统计差异求和(summing)以产生该镜头的一色阶统计差异总和，来进行 该稳定片段提取，其中每一 色阶统计差异系对应于每一镜头中的两图框的色 阶统计之间的差异。接着，通过排除(excluding)具有较大的色阶统计差异总和的镜头，使这些具有较大的色阶统计差异总和的4竟头不被提取，来完成 该稳定片段提取。也就是说，在本实施例中，具有较小的色阶统计差异总和的镜头被-见为稳定(stable),也因此在步骤932中被提取。这样被提取的镜 头仍暂时地维持着上述被编索引的状态，而这样被排除的镜头则从此可被忽 略(例如通过由去除其索引来实现)。在此，暂时地维持着上述被编索引的 状态的这样被提取的镜头被视为可供下一步骤(在本实施例即步骤934)使 用的候选镜头。依据本实施例的一实施选择，在步骤932中， 一色阶统计差异总和是否 被视为较小或较大，可通过利用一预定阈值来决定。依据本实施例的另一实 施选择，在步骤932中， 一色阶统计差异总和是否被S见为较小或较本文档来自技高网...

【技术保护点】
一种用来对视频流所载的运动视频节目编索引的方法，包含有：通过进行镜头检测来对该视频流的多个镜头暂时地编索引；至少依据该镜头检测过程中被编索引的镜头中的至少一部分的低阶视觉特征，从该至少一部分提取该运动视频节目的多个镜头，通过这样让被提取的镜头仍暂时地维持着被编索引的状态；以及通过比较被提取的镜头中的一镜头与至少被提取的镜头中的其它镜头来确认多个镜头，通过该被确认的镜头仍维持着被编索引的状态，用于进行该运动视频节目的至少一部分的回放。

【技术特征摘要】
US 2006-9-19 11/533,3571.一种用来对视频流所载的运动视频节目编索引的方法，包含有通过进行镜头检测来对该视频流的多个镜头暂时地编索引；至少依据该镜头检测过程中被编索引的镜头中的至少一部分的低阶视觉特征，从该至少一部分提取该运动视频节目的多个镜头，通过这样让被提取的镜头仍暂时地维持着被编索引的状态；以及通过比较被提取的镜头中的一镜头与至少被提取的镜头中的其它镜头来确认多个镜头，通过该被确认的镜头仍维持着被编索引的状态，用于进行该运动视频节目的至少一部分的回放。2. 如权利要求1所述的方法，其还包含有进行广告检测以将该镜头检测过程中被编索引的其它镜头中筛出该运动 视频节目的多个镜头；其中在提取该运动视频节目的多个镜头的步骤中，该镜头检测过程中被 编索引的镜头中的该至少一部分系被定义为这种被筛出的镜头。3. 如权利要求1所述的方法，其中被确认的镜头仍维持着被编索引的状 态，用于进行该运动视频节目的该至少一部分的重新排列回放。4. 如权利要求3所述的方法，其还包含有对维持着被编索引的状态的被确认的镜头进行排序，以进行该运动视频 节目的该至少一部分的重新排列回放。5. 如权利要求4所述的方法，其中对维持着被编索引的状态的被确认的 镜头进行排序的步骤还包含有通过由比较被确认的镜头的动作，对被确认的镜头进行排序。6. 如权利要求5所述的方法，其中被确认的镜头系依据相似度来进行排序。7. 如权利要求5所述的方法，其中被确认的镜头系依据该动作的变化来 进行排序。8. 如权利要求1所述的方法，其中该至少一部分的该低阶视觉特征包含 该至少 一部分的色阶统计数据。9. 如权利要求8所述的方法，其中提取该运动视频节目的多个镜头的步 骤还包含有对每一镜头中的多个色阶统计差异求和以产生该^:头的一色阶统计差异 总和，其中每一 色阶统计差异系对应于每一镜头中的两图框的色阶统计之间的差异；以及至少排除具有较大的色阶统计差异总和的镜头，使具有较大的色阶统计 差异总和的镜头不被提取。10. 如权利要求9所述的方法，其中提取该运动视频节目的多个镜头的 步骤还包含有除了具有较大的色阶统计差异总和的镜头的外，对每一镜头的一钥框...

【专利技术属性】
技术研发人员：叶家宏，施宣辉，
申请(专利权)人：智辉研发股份有限公司，
类型：发明
国别省市：71[中国|台湾]