用于动态调整视频回放速度的技术制造技术

描述了用于增强视频回放的技术。在一些实施例中，该技术将记录的事件数据解析成多个段。每个段内的数据然后可在标识潜在感兴趣的事件的发生的尝试中被分析。基于该分析，可向每个段指配重要性值或对于每个段调整重要性值。基于段的重要性值与一个或多个重要性阈值的比较，可向该段指配回放速度。将每个段与指配的回放速度相关的回放索引然后可被产生，并用于在视频查看期间控制回放速度。这可允许视频的相对不感兴趣的部分以高回放速度自动绕过，而感兴趣的部分以相对低的速度播放。

【技术实现步骤摘要】
【国外来华专利技术】【专利说明】
技术介绍
在使用个人电子装置记录诸如生日聚会、体育赛事、户外活动等事件的兴趣正在增长。在许多实例中，用户制作了包含相对少感兴趣事件的长视频剪辑。例如，用户可能记录了三小时的骑自行车通过山峰，其中可能仅几分钟被视为感兴趣的。当回顾该视频时，在达到视频的感兴趣部分之前，用户可能不得不观看大量不感兴趣的视频。尽管用户可手动快进通过不感兴趣的部分，但这可导致用户错过视频的感兴趣部分，除非降低快进回放速度。为了解决这个问题，已经开发了编辑记录的视频数据以标识关键帧(时刻)并索引那些关键帧的技术。关键帧提供了用户或观众通过从关键帧跳到关键帧来快速导航通过视频的方便基础。然而，自动标识这些关键帧可能是困难的，并且如果手动执行，则是用户费力的过程。还已经开发了用于自动标识关键帧并产生关键帧索引的技术。此类技术可依赖于当装置记录事件时产生的视频、音频和/或其它传感器数据的改变。尽管那些技术能消除与关键帧的手动指配关联的许多人力，但它们可能仍提供了不充分的用户体验。例如，自动关键帧标识系统可能错过可被视为用户感兴趣的记录中的事件。这可削弱系统标识记录中所有感兴趣事件的能力的用户信任。自动关键帧标识系统还可能向用户不感兴趣的记录部分错误地指配关键帧。在此类实例中，用户花费相当大量的时间并努力移除不想要的关键帧，可能是必要的。因而，在本领域存在对于用于回顾和/或编辑记录并且具体地说用于回顾视频记录的改进技术的需要。【附图说明】图1图示了与本公开一致的示范系统的框图。图2图示了与本公开一致的另一示范系统。图3图示了与本公开一致的另一示范系统。图4图不了与本公开一致的另一不范系统。图5A-5C图示了与本公开一致的附加示范系统。图6描绘了与本公开一致的示范使用情况。图7描绘了与本公开一致的用于生成回放索引的示范方法。图8描绘了与本公开一致的用于更改生成回放索引的方式的方法。【具体实施方式】本公开的各种实施例针对增强视频回顾。本文所使用的术语“视频”一般是指当执行时表示描绘运动的图像序列的媒体。视频可包括数字记录，所述数字记录包含视频轨道，并且视频可选地可包含其它记录的数据(诸如音频轨道或其它传感器数据)，或与之关联。与各种实施例一致，本文描述的技术可通过将视频解析成多个段来增强视频查看。一旦视频被解析，本文描述的技术就可利用视频和/或与视频一起收集的其它传感器数据来向视频的每个段指配重要性值(significance value)。每个段的重要性值然后可与一个或多个重要性阈值相比较，其中每个阈值与对应回放速度关联。例如，第一重要性阈值以上的重要性值可与第一(例如相对低的)回放速度关联，而在第一重要性阈值以下的重要性值可与第二 (例如相对快的)回放速度关联。用这种方式，本文描述的技术可产生视频的索引(回放索引)，其中回放索引提供了视频的每个段的回放速度。如本文所使用的，术语“段”一般是指视频的时间子区。例如，本文描述的技术可将视频解析成Y/n个段，其中F是视频的总长度(例如以秒为单位)，而η是每个段的长度(例如也以秒为单位)，其可自动设置或由用户设置。从而，例如，如果视频是30分钟(Y=1800s)，并且段长5秒(n=5s)，则视频可被解析成360个5秒长的段。此类值当然是示范性的，并且可使用任何视频长度和段长度。例如，视频可被解析成范围从大约0.1毫秒到大约1000毫秒(ms)或更多(诸如大约200ms、大约400ms、大约600ms或甚至大约800ms)的段。备选地或附加地，每个段可对应于视频的大约1、2、5、10、20、30、40、50、60或更多帧。还应该理解到，每个段的长度需要不相同。例如，段长可增大或减小，取决于由系统指配的重要性值、用户输入或它们的组合。在又一些实施例中，本文描述的技术可分析所有或部分记录的事件数据，并向被确定为重要的或者另外可能用户感兴趣的部分指配重要性值。换言之，对于表示可能感兴趣的事件的数据，记录的事件数据可作为整体进行分析。随后，记录的事件数据可被解析成段，例如，基于该技术确定此类段是感兴趣的或不感兴趣的程度。本文描述的技术在一些实施例中可基于指配给记录的事件数据的相对感兴趣和相对不感兴趣的部分的重要性值进行此类指配。术语“重要性值”在本文用于指由本文描述的技术指配给视频段的值。一般而言，指配给一段的重要性值可表示段内容可被视为要考虑的视频的观众感兴趣的程度。在一些实施例中，每帧的重要性值可基于视频数据和/或在时间上映射到视频数据的传感器数据的分析进行设置。通过本文描述的技术确定重要性值的方式可受控制简档中的控制参数影响，如后面所描述的。如下面详述的，与各种实施例一致，传感器数据可通过与同一设备中的视频记录装置(诸如摄像机)协同定位的传感器收集。在其它实施例中，传感器数据可通过装在包含视频记录装置的单独设备中的传感器收集。因而，术语“传感器数据”在本文用于指从一个或多个传感器或传感器组件(诸如音频传感器、全球定位传感器、生物统计传感器、本文描述的另一传感器或传感器组件、它们的组合等等)记录的数据。图1图示了与本公开一致的视频回顾系统100的框图。一般而言，视频回顾系统100针对处理视频和其它数据，以通过向考虑下的视频的各个部分指配回放速度来增强视频查看。视频查看系统100可组织包含视频的多类型数据，其中在公共事件诸如事件102记录多类型数据。在各种实施例中，除了视频数据以外，其它类型记录装置(诸如传感器)可收集在时间上可与记录的视频轨道相关的数据，以便用于标识可促进视频编辑的视频轨道部分。为了方便起见，从事件记录的视频和/或传感器数据可在本文单独称为或统称为“记录的事件数据”。在一些实施例中，记录的事件数据包含视频数据和在时间上映射到视频数据的传感器数据。在图1中图示了由视频回顾系统100提供的各种功能，在可执行那些功能的各种组件旁边。如所图示的，视频回顾系统100支持基于视频和传感器数据中至少一个的视频和传感器数据的记录、记录的数据的存储、用于处理的数据传送以及视频回放索引的产生。如图1所示，视频回顾系统100包含可从事件102中收集和/或存储视频数据的视频记录组件104。视频记录组件104的示例包含专用摄像机、具有视频记录能力的数字相机、移动电话、智能电话、平板计算机、笔记本计算机或具有视频记录能力的其它计算装置。当然，可使用其它类型视频记录组件，并且本公开也考虑到这些。视频回顾系统100进一步包含传感器组件106a、106b至106η，其中a、b和η中的至少一个是正整数，并且该组中的传感器组件数量大于0。传感器组件的非限制示例包含加速计、音频传感器(例如麦克风)、生物统计传感器、全球定位系统(GPS)传感器、陀螺仪、压力传感器、温度传感器、光传感器、湿度传感器。示范生物统计传感器包含光学或红外相机、虹膜扫描仪、面部识别系统、语音识别系统、手指/拇指指纹装置、眼睛扫描仪、生物信号扫描仪(例如，心电图、脑电图等)、DNA分析仪、步态分析仪、麦克风、它们的组合等。此类生物统计传感器可配置成标识和/或记录有关生物信号(脑电波、心脏信号等)、耳型、眼睛(例如虹膜、视网膜)、脱氧核糖核酸(DNA)、脸、手指/拇指指纹、步态、手几何形状、手写、按键(S卩，键入图案或特性)、本文档来自技高网...

【技术保护点】
一种设备，包括：处理器；以及智能寻找模块，在所述处理器上操作以便：将记录的事件数据解析成多个段，所述记录的事件数据包括视频数据和映射到所述视频数据的视频帧的传感器数据；向所述多个段中的每个段指配重要性值；将所述多个段中的每个段的重要性值与第一重要性阈值相比较；向具有超过所述第一重要性阈值的重要性值的所述多个段中的每个段指配第一回放速度；向具有在所述第一重要性阈值以下的重要性值的所述多个段中的每个段指配第二回放速度，所述第二回放速度大于所述第一回放速度；以及生成回放索引以标识具有对应回放速度的所述多个段中的每个段。

【技术特征摘要】
【国外来华专利技术】

【专利技术属性】
技术研发人员：D阿夫拉哈米，E伊拉马，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国;US