视频内容动态搜索的方法和装置制造方法及图纸

技术编号:3602381 阅读:187 留言:0更新日期:2012-04-11 18:40
视频内容动态搜索方法,包括步骤:    (a)根据镜头索引信息和当前重放位置确定正常重放段和快进重放段;和    (b)根据确定的段从当前重放位置以相应速度重放视频内容。(*该技术在2023年保护过期,可自由使用*)

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及一种启示/重现装置,并且尤其是,涉及一种视频内容的动态搜索方法。
技术介绍
随着大众传媒的发展和多媒体内容的方便生产,每天人们与大量媒体接触。由于媒体内容的量变大,需要使用者想要得到的数据的自动分类系统,并且解决这种需要的方法被积极地研究。尤其地,随着数字技术的发展,视频内容被数字化地存储和在市场上出售。如果数字广播被普及,视频内容的数字化将被进一步加速。关于这些数字视频内容,一些使用者可能想要看到体育相关的新闻情景,另一些使用者可能想要看到股票想关的新闻情景,而其他使用者可能想要看到在表演节目中的特定的人物的场景。为满足使用者的多种要求,多种研究在活跃地进行。一些使用者可能想要在有限的时间中知道视频内容的全部情景。正是“精彩场面(highlight)”实现这一需求。总之,精彩场面可以被看作归类视频内容中的重要场景制成的新内容。以“运动精彩场面”、“电影预告”、“头条新闻”等为例。然而事实上,根据当今技术从视频内容摘录出精彩场面很难实现自动化。因此,大多数人手工从视频信息中摘录精彩场面。如上所述,随着媒体数量极大地提高,需要大量的时间和成本来手工创建所有视频信息的精彩场面,因此实际上很难商业化。因此,需要使使用者理解全部的内容的自动系统。一般,当使用者想要跳转到视频内容的预定位置,通常可以使用关键帧(key frame)。使用关键帧制作的视频摘要帮助使用者快速跳转到使用者想要获得的情景。然而,由于使用者需要许多关键帧以便容易地找到使用者想要获得的位置并且很难在有限的显示空间显示许多关键帧,使用者需要多次选择条目。对于使用者而言,十分不方便。此外,通常使用者很难理解整个视频内容。最近,各种视频索引技术已被研究来找出数字视频的使用者需要的情景。换言之,例如找出特定人物的情景、识别出人物是谁和索引人物外貌的信息的方法,和从电影或运动中摘录主要情景和索引摘录情景的方法已被研究。然而,视频具有多种类型和不同数据根据类型进行索引。因此,根据现有技术,可以精确地为使用者摘录有意义的信息的自动系统很难实现。同时,与模拟视频相反,数字视频可以通过使用快进/快倒功能防止视频品质退化。在数字视频广泛使用的快进方法中,每单位时间解码的帧的数目被增加,因此只有其中一些帧被显示或者一些帧被略过并且帧被解码以显示。然而,增加每单位时间解码的帧的数量的方法根据终端性能影响最大速度。因此,在数字视频的快进/快倒功能中,通常略过一些部分和解码并显示帧的方法被广泛地使用。在传统技术中,数字视频的快进/快倒功能为满足使用者在有限时间内想要知道全部内容或移动到使用者需要的位置的需求的最合理解决方法。然而,当预定部分被略过时,通常以预定的时间间隔略过,因此使用者可能丢失使用者需要的情景或者不重要的情景可能相比较而言被过多显示。同时,在用于搜索视频的传统活动图象变速重放方法中,变化的速度被在重放活动图象的所有时期经常地固定。然而,当使用变速重放技术快速重放或慢速重放活动图象时,使用者的视觉特性不能被满足。例如,当活动图象以恒定的速度快进时,屏幕变化得太快以致使用者不能在活动图象快速变化的时段中识别活动图象。在活动图象变化慢的时段中屏幕变化得太慢以致使用者感觉厌烦并且不能感觉到快进。反之,当活动图象被慢速重放时,尽管使用者想要在活动图象快速变化的时段慢速重放,屏幕被快速变化。在活动图象被慢速变化的时段,屏幕变化太慢以致由于屏幕更慢的变化使使用者感到厌烦。一般,快进具有快速搜索的目的而慢速重放具有仔细观察特定情景的目的。实际上,从使用者观看的角度考虑,使用者希望在情景快速变化时段中更加慢速地重放并且使用者希望在情景慢速变化时段中更快地重放。因此,如果根据变速时段的图片变化率,通过适应地改变变速程度自动地和适应地控制活动图象的速度,上述问题被解决。已有人提出自动适应速度控制技术。该技术包括步骤检测切换,和通过使用一个切换和另一切换之间的帧的数量和在重放时段的相邻帧之间影像的差别,根据影像移动率控制重放速度更快或更慢,因此根据影像的动态特性,在变速时段的速度被适当地改变以适合于人们的视觉特性。例如,根据屏幕的复杂性自动控制重放速度的系统的概念已被提出。该系统被提出作为根据情景的运动率自动控制重放速度的显示系统。然而,在该技术中,情景变化被定义差值图象。基于相邻帧的图象差的“屏幕复杂性”被使用。然而,当运动被定义为差值图象时,由于该技术应该比较全部象素,处理时间变长。在屏幕复杂性被定义为差值图象的技术中,如果目标和背景之间的色差很大,尽管目标变化很慢,仍确定目标变化为快速的。相应地目标被慢速重放因此使用者需要的重放速度没有达到。同时,以视频实际内容进行的角度来看,前一和下一图象的全部差别不会完整地反映内容进行的含义。根据情节进行以及仅仅图象差,内容的复杂性实际上可以被不同地感到。这一点却没有引起注意。例如,在肥皂剧的情况中,对话情景可以被单调地继续但是如果摄像机的位置经常被改变,前一和下一图象的差别就大了。该部分可以被确定为复杂屏幕并慢速重放。然而,尽管对话情景单调地继续很长时间,该部分更好是快进。因此,很难仅由根据类型、应用和反映内容含义的活动图象的内容的差值图象而自动估计和确定“内容的复杂性”。以视频实际内容进行的角度,当综合考虑到运动信息、镜头信息、人物面部信息(作为内容进行的核心的特定目标检测信息)、文本信息和音频信息等时,视频的“内容的复杂性”反映实际的人感觉的“内容的复杂性”。如上所述,随着多媒体内容数量的增长,需要用于归类使用者需要的数据的自动系统。当今,随着称为个人视频记录器(PVR)的新的个人视频记录设备(可以记录和重现视频)被开发,这种自动系统很经常被需要。在传统技术中,快进功能被用来快速跳到使用者需要的位置并且用于构成自动摘要系统的视频浏览技术被引入。然而,传统快进功能难于帮助使用者容易地跳到使用者需要的位置或一些使用者由于太快速的情景进行而感到眩晕。理想是使用视频浏览功能作为自动视频摘要功能而非帮助使用者跳到使用者需要的位置的方法。尤其是,由于使用基于复杂视频分析功能或1-或2-维关键帧的树状结构的视频导航功能需要复杂的用户界面,对于除专家以外的使用者很难在电视环境下使用视频导航功能并且界面设计很复杂。如上所述,视频内容搜索需要被用于编辑使用者所有的内容和简单浏览。换而言之,使用者想要看到排除广告或不感兴趣信息的视频内容并想要单独编辑和存储仅使用者需要的部分。当今,PVR记录广播流在数字媒体上,允许使用者在任何时间再次看到相应内容,任意访问使用者需要的位置,和提供模拟视频不可能实现的快进功能。因此,需要的是有效地解决传统视频搜索技术中的问题,并能够包括在数字视频记录/重现装置,如PVR中的视频搜索系统。
技术实现思路
因此,本专利技术直接关于充分消除一个或多个由于相关技术的限制和缺点引发的问题的视频内容的动态搜索方法和装置。本专利技术的一个目的是提供一种视频内容的动态搜索方法和装置,其具有使用镜头索引信息快速搜索视频流和帮助使用者快速地跳到使用者需要的位置的动态搜索功能。本专利技术的另一目的是提供一种视频内容的动态搜索方法和装置,其不需要镜头结构和情景结构而使得索引产生器的结构和实现变得简单,该方法和装置与传统浏览技术相本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】

【专利技术属性】
技术研发人员:金泰亨尹庆老田星培
申请(专利权)人:LG电子有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1