用于将广告剪辑插入视频序列的方法以及对应设备技术

公开了用于将广告剪辑插入视频序列的方法以及对应设备。本发明专利技术涉及用于处理画面的方法，所述方法目的在于在称为视频序列的视频画面序列的两幅画面之间的称为插入的点处插入广告剪辑，所述方法包括以下步骤：生成（Ｅ１）表示所述插入点之前的视频序列的突性的突性映射；为广告剪辑集的每一广告剪辑生成（Ｅ２）突性映射；为所述广告剪辑集的每一广告剪辑确定（Ｅ３）所述视频序列的突性映射与所述广告剪辑的突性映射之间的类似程度，所述类似程度表示所述两个映射上的突性区域的位置之间的比较；在所述广告剪辑集之中，选择（Ｅ４）具有最高类似程度的广告剪辑；以及将所选择的广告剪辑在所述插入点处插入（Ｅ５）所述视频序列。

【技术实现步骤摘要】

本专利技术涉及将剪辑或广告序列插入视频画面序列。
技术介绍
随着通过互联网发布视频内容的到来，该领域的参与者(诸如Yahoo ,GoogleTM或 Microsoft )将广告看作成长的关键要素。为此已经开发出不同的工具，用于在避免打扰 到观众的同时，增强在视频中插入的广告的视觉影响。 具体地，Microsoft 已经开发了在题为VideoSense :a contextual videoadvertising system, Proceedings of the 15th international conference onMultimedia，pp 463-464,2007的文献中所描述的称为VideoSense的工具。该工具被创 建用于将广告剪辑插入到视频序列中，目的在于选择与视频序列相关的剪辑并在关键时刻 将其插入在视频中，而不仅是在视频序列的开始和结束处。为了选择要插入的剪辑，从剪辑 和序列中提取颜色、运动或声音节律类型的低级(low-level)参数，然后彼此进行比较，然 后所选择的剪辑是具有最接近于视频序列的低级参数的低级参数的剪辑。额外的信息(诸 如与剪辑或序列关联的、并且由剪辑或序列中所包含的视频内容或文本信息的广告商或广 播商所提供的标题)也用于选择插入视频序列的剪辑。 一旦被选择，该剪辑就被插入视频 序列的特定点处，更具体地是在不连续性高并且吸引力低的序列的点处、例如在不包含任 何运动的场景或镜头的结束处。 因此，所选择的剪辑通常被放置在镜头变化之后。虽然所选择的剪辑的视频内 容与其被插入的序列的内容有关，但这种镜头变化对观众感知剪辑的影响被忽略。实际 上，若干研究观测到的现象，尤其是在0. Le Meur， P. LeCallet和D. Barba发表在Vision Research, Vol. 47/19pp. 2483-2498， S印t. 2007的题为Predicting visual fixations on video based on low-level visual features的文献中_未考虑在镜头变化之后所注视 的区域的时间延展(temporalextension)。这些研究的结果是观众在镜头变化之后的近似 200到300毫秒的时间之内继续注视他在镜头变化之前注视的区域。因此，观众所看到的 区域并不取决于当前时间所显示的画面，而是取决于先前所显示的画面。图1图示了该现 象。由包括7幅画面的视频序列所表示的图的上面部分的一行画面以100毫秒的时间间隔 而彼此分离。在该序列的第三与第四画面之间发生了镜头变化。该图下面部分的一行画面 通过白点示出了观众注视的画面区域。注意，观众仅在第六画面(也就是在镜头变化之后 的2幅画面)结束处转移他的注视。这种时间延展归因于不同的因素，特别是时间掩蔽、惊 异效果以及重新初始化感知行为而在生物学上所需的时间。在50Hz视频的情况下，这种时 间延展在镜头变化之后持续大约15幅画面。 如果广告的感兴趣区域没有定位在与镜头变化之前视频序列的感兴趣区域相同 的点，则因此，广告的内容不被观众立即感知，并且广告对观众的视觉影响减小。不存在对 于广告所携带的消息的直接感知。
技术实现思路
本专利技术的一个目的在于优化插入到视频序列中的广告剪辑的视觉影响。 为此，根据本专利技术，所提出的是，在用于插入的广告剪辑的选择处理中，以视频序列的画面的感兴趣区域与广告剪辑的感兴趣区域之间存在连续性的方式来说明视频序列和广告剪辑的感兴趣区域。剪辑的内容将更快速地被观众所感知。 因此，本专利技术涉及用于处理画面的方法，所述方法目的在于在称为视频序列的视 频画面序列的两幅画面之间的称为插入点的点处插入广告剪辑，所述方法包括以下步骤 生成表示所述插入点之前的视频序列的突性(salience)的突性映射(salience map)， 为广告剪辑集的每一广告剪辑生成突性映射， 为所述广告剪辑集的每一广告剪辑确定所述视频序列的突性映射与所述广告剪辑的突性映射之间的类似程度，所述类似程度表示所述两个映射上的突性区域的位置之间 的比较， 在所述广告剪辑集之中，选择具有最高类似程度的广告剪辑，以及 将所选择的广告剪辑在所述插入点处插入所述视频序列。 因此，所插入的广告剪辑是在插入点的级别上就视频序列与广告剪辑之间的突性 而言提供最佳连续性的广告剪辑。 根据特定实施例，所述插入点是与所述视频序列中的镜头变化对应的所述视频序 列的点。 根据特定实施例，从所述插入点之前的视频序列的最后n幅画面的突性映射生成 表示所述插入点之前的所述视频序列的突性的突性映射，n在1与50之间。例如，在50Hz 视频的情况下，对所述插入点之前的视频序列的最后15幅画面的突性映射进行平均。 根据一个实施例，从广告剪辑的前p幅画面的突性映射生成所述广告剪辑的突性 映射，P在1与50之间。例如，在50Hz视频的情况下，对剪辑的前15幅画面的突性映射进 行平均。 因此，选择就所述插入点之前的所述视频序列的最后各画面与广告剪辑的开始之 间的突性而言提供连续性的剪辑。 根据特定实施例，通过计算所述视频序列的突性映射与所述广告剪辑的突性映射 之间的相关系数来确定广告剪辑的类似程度，因此，所述类似程度与计算出的相关系数成 正比。 根据本专利技术方法的另一特定实施例，通过计算所述视频序列的突性映射与所述广 告剪辑的突性映射之间的Kullback-Leibler散度来确定广告剪辑的类似程度，因此，所述 类似程度与计算出的散度成反比。 根据另一特定实施例，为了确定广告剪辑的类似程度，执行以下步骤 从所述视频画面的突性映射和广告剪辑的突性映射中选择映射的N个称为最大突性点的最高突性点，所述点彼此由至少m个点分隔，并且从最高突性到最低突性排序，N大于或等于l， 为所述画面的突性映射的N个最大突性点中的每一个确定所述点与所述广告剪 辑的突性映射的相同的顺序的最大突性点之间的欧几里德距离，以及 计算所确定的N个欧几里德距离的平均值，因此，类似程度与计算出的平均值成 反比。 在该实施例中，确定相同顺序的最大突性点之间的欧几里德距离，在确定类似程 度时，在一定程度上考虑这些点的突性值。 根据变型实施例，所述N个最大突性点未排序。在该实施例中，广告剪辑的类似程 度的确定包括以下步骤 从视频画面的突性映射和广告剪辑的突性映射选择映射的N个称为最大突性点 的最高突性的点，所述点由至少m个点而彼此分隔，N大于或等于1， 为所述视频画面的突性映射的N个最大突性点中的每一个确定所述点与所述广 告剪辑的突性映射中最接近的最大突性点之间的欧几里德距离，以及 计算所确定的N个欧几里德距离的平均值，因此，所述类似程度与计算出的平均 值成反比。 在这最后两个实施例中，在突性映射中选择由至少m个点分隔的N个最大突性点 按以下方式来执行 a)从所述突性映射选择具有最大突性的点， b)禁止属于所述所检测点周围半径R的区域的所有点，R等于m个点，以及 c)对于突性映射的非禁止点，重复步骤a)和b)，直到获得N个最大突性点为止。 本专利技术还涉及用于处理画面的设备，所述设备目的在于在称为视频序列的视频画 面序列的称为插入的点处插入广告剪辑，包括 用于生成表示本文档来自技高网...

【技术保护点】
一种用于处理画面的方法，所述方法目的在于在称为视频序列的视频画面序列的两幅画面之间的称为插入的点处插入广告剪辑，所述方法包括以下步骤：生成（Ｅ１）表示所述插入点之前的视频序列的突性的突性映射，为广告剪辑集的每一广告剪辑生成（Ｅ２）突性映射，为所述广告剪辑集的每一广告剪辑确定（Ｅ３）所述视频序列的突性映射与所述广告剪辑的突性映射之间的类似程度，所述类似程度表示所述两个映射上的突性区域的位置之间的比较，在所述广告剪辑集之中，选择（Ｅ４）具有最高类似程度的广告剪辑，以及将所选择的广告剪辑在所述插入点处插入（Ｅ５）所述视频序列。

【技术特征摘要】
FR 2008-10-7 0856779一种用于处理画面的方法，所述方法目的在于在称为视频序列的视频画面序列的两幅画面之间的称为插入的点处插入广告剪辑，所述方法包括以下步骤生成(E1)表示所述插入点之前的视频序列的突性的突性映射，为广告剪辑集的每一广告剪辑生成(E2)突性映射，为所述广告剪辑集的每一广告剪辑确定(E3)所述视频序列的突性映射与所述广告剪辑的突性映射之间的类似程度，所述类似程度表示所述两个映射上的突性区域的位置之间的比较，在所述广告剪辑集之中，选择(E4)具有最高类似程度的广告剪辑，以及将所选择的广告剪辑在所述插入点处插入(E5)所述视频序列。2 根据权利要求1所述的方法，其特征在于，所述插入点是与所述视频序列中的镜头 变化对应的视频序列的点。3. 根据权利要求1或2所述的方法，其特征在于，从所述插入点之前的视频序列的最后 n幅画面的突性映射生成表示所述视频序列的突性的突性映射，n在1与50之间。4. 根据权利要求1至3中的任何一项所述的方法，其特征在于，从广告剪辑的前p幅画 面的突性映射生成所述广告剪辑的突性映射，p在1与50之间。5. 根据权利要求1至4中的任何一项所述的方法，其特征在于，为了确定广告剪辑的类 似程度，计算所述视频序列的突性映射与所述广告剪辑的突性映射之间的相关系数，因此 所述类似程度与计算出的相关系数成正比。6. 根据权利要求1至4中的任何一项所述的方法，其特征在于，为了确定广告 剪辑的类似程度，计算所述视频序列的突性映射与所述广告剪辑的突性映射之间的 Kullback-Leibler散度，因此所述类似程度与计算出的散度成反比。7. 根据权利要求1至4中的任何一项所述的方法，其特征在于，为了确定广告剪辑的类 似程度，执行以下步骤从所述视频画面的突性映射和广告剪辑的突性映射中选择映射的N个称为最大突性 点的最高突性点，所述点彼此由至少m个点分隔，并且从最高突性到...

【专利技术属性】
技术研发人员：奥利维尔勒缪尔，亚历山大尼纳希，法布里斯厄本，
申请(专利权)人：汤姆森特许公司，
类型：发明
国别省市：FR[法国]