创建和链接视频文档的方法与设备技术

一种创建视频文件的方法包括以下步骤：输入待处理视频数据，通过识别镜头间的间隔把视频数据分割成镜头，使用运动分析把镜头进一步分割为子镜头，来为受关注物体的运动提供定位信息，给视频数据中的关注物体描绘边界，这样关注物体就由镜头中的边界代表，以及创建基于关注物体边界的可锚定信息单元文件，这样受关注物体可以用来标识视频数据的部分。此外还包括一种系统。（*该技术在2020年保护过期，可自由使用*）

【技术实现步骤摘要】
背景1.
本公开涉及创建(authoring)、提取和链接视频物体，更具体地说，就是通过定义视频中的受关注物体来创建视频。2.相关领域描述多媒体信息经常十分复杂，涉及大量的资源，包含大量的数据。为了使得多媒体信息可用，较好的方法是通过应用所有存在的资源，比如借助于链接，来创建相关并且合适的题材。这就给用户提供了一条基于当前需要，浏览多媒体文档的途径。这样，用户无需真正地查看存在的所有信息，就能够提取并观看相关信息。这对那些变得非常热门的视频尤其适用，各种资源正以不断递增的速率产生这些视频，比如防御/民用卫星、科学试验、生物医学图像，工业调查、家庭娱乐系统等等。这些应用中，视频片断通常须要和其它媒体形式一道使用，比如音频、文本、图像等。比如，一个电子手册，当描述某个机器零件的时，适合允许用户观看相关子部件的视频片断。在该片断中，子部件可以为高亮，被点击后把用户带到其它相关的信息资源，或者回到原来的正文部分。有利的做法是在视频物体和其它相关信息间创建链接，该物体在视频的某段持续时间里可见。而且，一段视频片断的持续时间里，可能同时存在几个有链接的物理，或者存在于不同的时间窗口，基于其内容链接到不同的目标。为了结合所有其它的媒体类型，即文本、图像、音频等，以有效的方式使用视频信息，对视频进行分割和组织是很重要的，并且在视频不同部分的物体及其它媒体形式的恰当信息之间创建合适的链接。在概念上，这与超文本有关。根据用户的兴趣和视频的内容，它给用户提供了一条可跟踪的路径。正如网页，在任意情况下，视频空间可以同时存在几个静态和动态的链接，不同与网页的是，链接机会仅仅在一段固定时间的窗口中存在，它随着关注物体的消失而消失，当然除非用户暂停视频播放、倒带和重播，在这种情况下，链接机会再次出现。换句话说，这种情况下，链接便多了一个维数，即时间。如上面提到的，超链接视频或超视频的概念源自于超链接文本，或超文本。早期的这类工作包括，比如，故事空间，出自J.D.Bolter，“Writing SpaceThe Computer，Hypertext and the Historyof Writing，Lawrence Earlbaum and Associates，Hillsddale，N.J.1991”，一种来自Eastgate系统的超文本书写环境，在链接和节点的显示上采用了空间的比喻。用户创建书写空间，或文本和图像的容器，他们再链接到其它的书写空间。书写空间形成分层结构，用户能够可视化地操作和重组。综合法，出自C.Potts，等人的“Cdlaborativepre-writing with a video based group working memory，Tech-Report，Graphics Usability and Visualization Center，Georgia Instituteof Technology，pp.93-95，1993”，是一种基于故事空间的工具，允许为那些相关于书写空间中文本的同类视频内容做索引和浏览。综合法可以应用在超视频开发的设计和原型阶段。它提供了从文本到视频链接的早期示范。视频到视频的链接第一次使用在多媒体杂志Elastic Charles中，出自H.P.Brondmo等人的“Creating and Viewingthe Elastic Charles-A Hypermedia Journal in HypertextStateof the Art，Intellect，Oxford，UK，1991”，由MIT媒体实验室的交互电影组开发。微小机器或小型化的电影循环短暂地出现，以提示链接。这种原型依赖于同类的视频和激光影碟技术，需要两个银屏。今天，数字视频允许复杂得多的处理。交互的Kon-Tiki博物馆，出自G.Liestol，“Aesthetic andrhetorical aspects of linking video in hypermedia，Proc.Hypertext-94，ACM Press，New York，pp.217-223，1994”，其中，借助于媒体类型间的基本特性交换，存在从视频到文本和从视频到视频的持续链接。在文本中加入了时间相关，在视频中加入了空间同步性。视频书籍，出自R.Ogawa等人的“Design strategies forscenario-based hypermediadescription of its structure，dynamics and style，Proc.Hypertext-92，ACM Press，New York，pp.71-80，1992”，演示了基于时间的、面向场景的超媒体。这里，用节点表示来组织多媒体内容，时间驱动链接依据时间属性，自动激活来呈现内容。参考L.Hardman等人的“The Amsterdam hypermedia modelAdding time and content to the dexter model，Communications ofthe ACM，3750-62，1995”，其中，当跟随链接时，他们使用定时显式地指明源和目标内容。参考M.C.Buchanen等人的“Spedfyingtemporal behavior in hypermedia documents，Proc.Hypertext-92，ACM Press，New York，pages 71-80，1992”，作者通过在较高层次上操作媒体成分之间的时间关系，来创建多媒体文档，而不是定时。来自Ephyx Technologies的VactiveTM和来自InternationalBusiness Machines的HotVideoTM，允许有限集合的链接，这样用户交互时，本视频的另一个部分或是另一个视频开始播放，或者网页浏览器被指定某个URL地址。它提供了基本跟踪，因此可以跟踪简单运动的物体，该物体并不改变形状。可是，用户必须看完视频，来为跟踪找出开始和结束帧，如果有了错误，用户不得不重复这一工作。这些系统没有提供任何半自动的方法来组织视频，为用户提供的链接也是有限的。创建这些链接须要手动完成。这就限制了这些系统的灵活性和使用。在概念上，超文本和超视频之间有相似性，对于真正的实现，有一些想法须要重新表述，以适应视频的动态特征。这样，链接必须既是时间的也是空间的。而且，创建须要对信息进行编码。定位这些链接的情况是相似的。因此，需要一种系统和方法，来简化为超链接而创建视频，其中用户无需为标识关注物体而浏览整个视频。还须要提供在起始与结束帧之间，对关注物体的位置进行插值的能力，避免过多的计算开销。再就是需要有运动分析，来把镜头进一步分割为子镜头，以及使用自动超链接，把视频片断和其中的物体链接到文件系统的不同部分。专利技术概述一种创建视频文件的方法包括以下步骤输入待处理视频数据，通过识别镜头间的间隔把视频数据分割成镜头，使用运动分析把镜头进一步分割为子镜头，为受关注的运动物体提供定位信息，给视频数据中的关注物体描绘边界，这样关注物体就由镜头中的边界代表，以及创建基于关注物体边界的可锚定信息单元文件，这样受关注物体可本文档来自技高网...

【技术保护点】
一种创建视频文档的方法包括以下步骤：输入待处理的视频数据；通过辨识镜头之间的间断把视频数据分割为镜头；借助运动分析把镜头细分为子镜头，提供关注物体的定位信息；给视频数据中的关注物体描绘边界，使得边界可以代表镜头中受关注物体； 以及根据关注物体的边界创建可锚定信息单元文件，使得关注物体可以用于表示视频数据的一些部分。

【技术特征摘要】
US 1999-2-22 09/255,0901.一种创建视频文档的方法包括以下步骤输入待处理的视频数据；通过辨识镜头之间的间断把视频数据分割为镜头；借助运动分析把镜头细分为子镜头，提供关注物体的定位信息；给视频数据中的关注物体描绘边界，使得边界可以代表镜头中受关注物体；以及根据关注物体的边界创建可锚定信息单元文件，使得关注物体可以用于表示视频数据的一些部分。2.如权利要求1所述的方法，其中分割视频数据的步骤包括以下步骤给视频数据定义时间段；为时间段计算一些量作为时间序列数据；比较时间段之间的视频数据；以及找出视频数据时间段之间的突变和渐变，以定义镜头。3.如权利要求1所述的方法，其中借助运动分析把镜头细分为子镜头的步骤包括以下步骤通过计算光流估计关注物体的运动；观察受关注物体的运动；计算估计运动和观察运动之间的误差；以及如果误差超出某个阈值，创建额外的节点来进一步定义关注物体的运动。4.如权利要求1中所述的方法，其中运动分析包括仿射变换。5.如权利要求1中所述的方法，其中描绘关注物体的边界的步骤包括以下步骤给每一镜头的关注物体指定类型，物体类型包括顶点；在镜头帧之间，对物体类型的对应顶点进行插值，以定义样条和直线中的一种，使得样条和直线便定义了帧之间关注物体的运动。6.如权利要求1中所述的方法，进一步包括把关注物体链接到其它物体的以提供交互的视频文档的步骤。7.如权利要求6中所述的方法，其中把关注物体链接到其它物体的步骤提供交互的视频文档，包括在视频文档和其它物体之间提供自动超链接。8.如权利要求7中所述的方法，其中提供自动超链接由超链接器提供，并进一步包括提供链接标准处理、模式匹配，以及在源和目标之间建立链接。9.如权利要求1中所述的方法，进一步包括提供代表视频数据中镜头和子镜头的关键帧的步骤，这样关键帧标识可以用于表示镜头和子镜头中的关注物体。10.如权利要求1中所述的方法，其中视频的说明采用视频AIU标准语言，它遵从标准的通用标记语言(SGML)语法，并进一步包括为视频标准定义语法。11.一种创建视频文档的方法，包括以下步骤提供一种播放视频的视频设备；把视频和可锚定信息单元(AIU)文件关联，AIU文件包含视频中关注物体所对应的物体类型，能够超链接到其它物体的关注物体包含在浏览器中；在帧之间对物体类型的边界进行插值，以定义关注物体的运动；以及播放视频，并显示和视频中的物体类型相关的可锚定信息单元，从而将关注物体链接到其它媒体提供交互的关注物体，当选中某一关注物体和其它媒体的物体后进行这种链接。12.如权利要求11中所述的方法，其中其它的媒体包括音频、图像、超文本、存储的信息和视频中的一种。13.如权利要求11中所述的方法，其中插值的步骤包括借助于运动分析，把辨识出的视频镜头细分为子镜头，运动分析包括以下步骤通过计算光流估计关注物体的运动；观察关注物体的运动；计算估计运动和观察运动的误差；以及如果误差超出某个阈值，则创建额外的节点来进一步定义关注物体的运动。14.如权利要求11中所述的方法，其中运动分析包括仿射变换。15.如权利要求11中所述的方法，其中插...

【专利技术属性】
技术研发人员：A查克拉波尔蒂，P刘，L芬，
申请(专利权)人：西门子共同研究公司，
类型：发明
国别省市：US[美国]