处理视频输入的处理方法与处理装置制造方法及图纸

一种处理视频输入的处理方法，该视频输入包含有至少传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流，该处理方法包含有：检查视频输入来侦测第一视角与第二视角中之一视角的第一图片在特定播放时间中是否有正确地与该第一视角与第二视角中的另一视角的第二图片配对，并据以产生侦测结果；以及参考该侦测结果来选择性地对该视频输入进行预定处理操作。本发明专利技术可以透过侦测在特定播放时间中是否一个视角的图片与另一视角的另一图片正确地配对来作出相对应的调整以及处理，以使视频输入中的配对错误的发生可以大幅地减低，进而提升观赏者的立体视觉体验。

【技术实现步骤摘要】

本专利技术所揭露的实施方式是有关处理视频输入(其传送不同视角的图片)，尤指一种透过侦测一个视角(view)的图片与另一视角的另一图片在特定播放时间中是否正确地配对来处理视频输入的处理方法以及相关的处理装置。
技术介绍
随着科技的发展，使用者追求立体(3D)并且更真实的视频输出而不是高画质的平面(2D)视频输出。立体视频内容可以透过许多格式中其中之一来进行编码并传送，举例来说，当采用并行排列(side-by-side)格式或是上下排列(top-and-bottom)格式时，一个编码过的视频巾贞会包含有一个左眼图片(left-eye picture)以及一个右眼图片(right-eye picture)排列于其中，因此，对于具有并行排列格式/上下排列格式的编码帧的译码而言，左眼图片与右眼图片会于播放之前便在时域上成对地产生。 在采用多视角视频码(multi-view video coding,MVC)来对立体视频内容进行编码的情况下，左眼图片与右眼图片分别被安排在不同的编码帧中，举例来说，一种多轨道存储(multi-track storage)机制可被用来存储具有多视角视频编码格式的编码巾贞,因此,用以传送左眼图片的编码帧会被存储在一个轨道中，而用以传送右眼图片的编码帧则被存储在另一轨到中，所以，对于具有多视角视频码格式的编码帧的译码而言，左眼图片与右眼图片并不一定保证会于播放之前在时域上成对地产生。由于某些发生在编码器及/或译码器中的错误，对后续的播放来说，包含在译码器输出中的一张左眼图片不会与包含于该译码器输出中的一张右眼图片正确地配对，反之亦然。举例来说，由译码已编码的多个视频帧而成对地产生的一张左眼图片与一张右眼图片可能具有不同的播放时间标记(presentation time stamp)(亦即，不同播放时间点)；此外，也有可能包含于该译码器输出中的一张左眼图片无法与任何右眼图片配对，反之亦然。因此，在一个特定的播放时间中，仅有一张左眼图片或者右眼图片存在于译码器输出之中，而这些存在于译码器输出之中的配对错误(pairing error)可能会大幅地降低立体视频播放的质量，进而导致观赏者具有不舒服的立体视觉体验。
技术实现思路
依据本专利技术的实施方式，其提出一种处理视频输入的处理方法以及相关的处理装置，以解决上述的问题。依据本专利技术的第一层面/实施方式，其揭示一种处理视频输入的处理方法。该视频输入包含有至少传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流。该处理方法包含有检查该视频输入来侦测该第一视角与第二视角中之一视角的第一图片在特定播放时间中是否有正确地与该第一视角与第二视角中之另一视角的第二图片配对，并据以产生侦测结果；以及参考该侦测结果来选择性地对该视频输入进行预定处理操作。依据本专利技术的第二层面/实施方式，其揭示一种处理视频输入的处理装置。该视频输入包含有至少传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流。该处理装置包含有检查电路以及处理电路。该检查电路检查该视频输入以侦测该第一视角与第二视角中之一视角的第一图片在特定播放时间中是否有与该第一视角与第二视角中之另一视角的第二图片正确地配对，并据以产生一侦测结果。该处理电路耦接于该检查电路，并且用来参考该侦测结果来选择性地对该视频输入进行预定处理操作。本专利技术可以透过侦测在特定播放时间中是否一个视角的一个图片与另一视角的另一图片正确地配对来作出相对应的调整以及处理，以使该视频输入中的配对错误的发生可以大幅地减低，进而提升观赏者的立体视觉体验。附图说明图I为本专利技术立体视频播放系统的实施方式的方块示意图。 图2为图I所示的检查电路采用第一侦测机制的操作的示意图。图3为图I所示的检查电路采用第二侦测机制的操作的示意图。图4为图I所示的处理装置所产生的视频输出的实施方式的示意图。图5为本专利技术处理视频输入的方法的一个实施方式的流程图。图6为本专利技术处理视频输入的方法的另一实施方式的流程图。具体实施例方式在说明书及后续的申请专利范围当中使用了某些词汇来指称特定的组件。所属领域中具有通常知识者应可理解，硬件制造商可能会用不同的名词来称呼同样的组件。本说明书及后续的申请专利范围并不以名称的差异来作为区分组件的方式，而是以组件在功能上的差异来作为区分的准则。在通篇说明书及后续的请求项当中所提及的“包含”为开放式的用语，故应解释成“包含但不限定于”。另外，“耦接”一词在此是包含任何直接及间接的电气连接手段。因此，若文中描述第一装置耦接于第二装置，则代表该第一装置可直接电气连接于该第二装置，或通过其他装置或连接手段间接地电气连接至该第二装置。本专利技术的主要概念在于侦测存在于可传送不同视角的图片的视频输入(例如，译码器输出)中的配对错误，因此，当辨认出配对错误时，视频输入可经过适当地处理/调整来产生视频输出，其可满足特定应用的需求。举例来说，对立体视频播放的应用而言，配对错误可以自该视频输入中移除，并且自该视频输入所产生的相对应的视频输出会被适当地播放，来提供用户改善后的立体视觉体验。进一步细节将说明于下。请参考图1，图I为本专利技术立体视频播放系统的一个实施方式的方块示意图。立体视频播放系统100包含有视频译码装置102、处理装置104、视频压缩装置(video packingapparatus) 106以及立体播放模块(例如，播放装置)108。在该实施方式中，视频译码装置102与处理装置104可设置于同一装置中，而在另一实施方式中，视频译码装置102与处理装置104可分别设置于不同装置中，且视频译码装置102可透过连接接口(例如一高清晰度多媒体接口(high-definitionmultimedia interface, HDMI))来与处理装置 104 沟通、连接。视频译码装置102用来译码编码过的视频比特流(encoded video bitstream)SI，并据以产生视频输入S2至后续的处理装置104。举例来说，编码过的视频比特流SI可传送具有并行排列格式、上下排列格式或多视角视频编码格式的编码过的视频帧(encodedvideo frame)，因此，视频译码装置102可根据实际设计需求/考虑而包含一个或多个视频译码器。在本实施方式中，视频输入S2是为译码器输出，其包含有传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流。举例来说，第一视角与第二视角中之一视角对应至左眼视界，且第一视角与第二视角之另一视角则对应至右眼视界。然而，此仅作为范例说明之用，并非作为本专利技术的限制条件，本专利技术的概念可应用于需要至少两个彼此适当配对的不同视角的图片的各种应用，而这些设计变化都符合本专利技术的精神。处理装置104耦接于前端的视频译码装置102与后端的视频压缩装置106之间，用来根据视频输入S2以产生视频输出S3。在本实施方式中，处理装置104包含有(但不局限于)检查电路112以及处理电路114。检查电路112用来检查视频输入S2，以侦测在特定播放时间内是否第一视角与第二视角中之一视角的第一图片与另一视角的第二图片是正确地配对，并据以产生侦测结果DR。处理电路114耦接于检查电路112，并用来参考侦测结果DR本文档来自技高网...

【技术保护点】
一种处理视频输入的处理方法，该视频输入包含有至少传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流，该处理方法包含有：检查该视频输入来侦测该第一视角以及该第二视角中之一视角的第一图片于特定播放时间中是否与该第一视角以及第二视角中之另一视角的第二图片正确地配对，并据以产生侦测结果；以及参考该侦测结果来选择性地对该视频输入进行预定处理操作。

【技术特征摘要】
2011.04.26 US 13/094,8031.一种处理视频输入的处理方法，该视频输入包含有至少传送第一视角的图片的第一视频比特流以及传送第二视角的图片的第二视频比特流，该处理方法包含有 检查该视频输入来侦测该第一视角以及该第二视角中之一视角的第一图片于特定播放时间中是否与该第一视角以及第二视角中之另一视角的第二图片正确地配对，并据以产生侦测结果；以及 参考该侦测结果来选择性地对该视频输入进行预定处理操作。2.根据权利要求I所述的处理视频输入的处理方法，其特征在于，检查该视频输入的步骤包含有 参考该第一图片的播放时间标签，来决定该视频输入在该特定播放时间中是否包含具有与第一图片的该播放时间标签完全相同的播放时间标签而可跟该第一图片正确地配对的第二图片。3.根据权利要求I所述的处理视频输入的处理方法，其特征在于，该视频输入于传送该第一图片时传送该第二图片，且检查该视频输入的步骤包含有 对该第一图片与该第二图片进行内容比较，来决定该第一图片在该特定播放时间中是否与该第二图片正确地彼此配对。4.根据权利要求3所述的处理视频输入的处理方法，其特征在于，对该第一图片与该第二图片进行该内容比较的步骤包含有 对该第一图片与该第二图片进行移动估测操作，并据以产生移动估测结果；以及 根据该移动估测结果来决定该第一图片与该第二图片在该特定播放时间中是否彼此配对。5.根据权利要求4所述的处理视频输入的处理方法，其特征在于，根据该移动估测结果来决定该第一图片与该第二图片在该特定播放时间中是否彼此配对的步骤包含有 当该移动估测结果指示移动向量在垂直方向上的分量大于预定临界值时，决定该第一图片与该第二图片在该特定播放时间中并没有正确地彼此配对。6.根据权利要求I所述的处理视频输入的处理方法，其特征在于，参考该侦测结果来选择性地对该视频输入进行该预定处理操作的步骤包含有 当该侦测结果指示该第一图片在该特定播放时间中没有与该第二图片正确地配对时，在该视频输入中搜寻可与该第一图片配对的特定图片，并且一并传送在该特定播放时间中彼此配对的该第一图片与该特定图片。7.根据权利要求6所述的处理视频输入的处理方法，其特征在于，该视频输入于传送该第一图片时不传送该第二图片，并且参考该侦测结果来选择性地对该视频输入进行该预定处理操作的步骤另包含有 当在该视频输入中搜寻不到该特定图片时，略过该第一图片，并且在该特定播放时间中回放在该特定播放时间的前一时间正确地彼此配对的图片。8.根据权利要求6所述的处理视频输入的处理方法，其特征在于，该视频输入于传送该第一图片时传送该第二图片，并且参考该侦测结果来选择性地对该视频输入进行该预定处理操作的步骤另包含有 当在该视频输入中搜寻不到该特定图片时，略过该第一图片与该第二图片，并且在该特定播放时间中回放在该特定播放时间的前一时间正确地彼此配对的图片。9.根据权利要求6所述的处理视频输入的处理方法，其特征在于，该视频输入于传送该第一图片时不传送该第二图片，并且参考该侦测结果来选择性地对该视频输入进行该预定处理操作的步骤另包含有 当在该视频输入中搜寻不到该特定图片时，更新第一计数值，其中该第一计数值用以记录采用回放模式对该视频输入进行处理时，一个视角的一个图片未能与另一视角的另一图片连续正确地配对的次数；以及 当该更新后的第一计数值大于第一预定临界值时，产生第三图片，并且一并传送在该特定播放时间中彼此配对的该第一图片与该第三图片。10.根据权利要求9所述的处理视频输入的处理方法，其特征在于，产生该第三图片的步骤包含有 产生该第一图片的复制图片来作为该第三图片。11.根据权利要求9所述的处理视频输入的处理方法，其特征在于，产生该第三图片的步骤包含有 透过对该第一图片进行平面转立体转换，来产生该第三图片。12.根据权利要求9所述的处理视频输入的处理方法，其特征在于，另包含有 于该更新后的第一计数值大于该第一预定临界值之后，更新第二计数值，其中该第二计数值用以记录一个视角的一个图片与另一视角的另一图片连续正确地配对的次数；以及 不断产生该第一视角与该第二视角中之一视角的一个图片来与该第一视角与该第二视角中的另一视角的既存的图片配对，直到该第二计数值大于第二预定临界值为止。13.根据权利要求6所述的处理视频输入的处理方法，其特征在于，该视频输入于传送该第一图片时传送该第二图片，且参考该侦测结果来选择性地对该视频输入进行该预定处理操作的步骤另包含有 当在该视频输入中搜寻不到该特定图片时，更新第一计数值，其中该第一计数值用以记录采用回放模式对该视频输入进行处理时，一个视角的一个图片未能与另一视角的另一图片连续正确地配对的次数；以及 当该更新后的第一计数值大于第一预定临界值时，产生该第一视角与该第二视角中的一个视角的第三图片，并且一并传送在该特定播放时间中彼此配对的该第三图片以及所选取的图片，其中该所选取的图片对应该第一视角与该第二视角中的另一视角。14.根据权利要求13所述的处理视频输入的处理方法，其特征在于，产生该第三图片的步骤包含有 产生该所选取的图片的复制图片来作为该...

【专利技术属性】
技术研发人员：游雅惠，萧哲民，
申请(专利权)人：联发科技股份有限公司，
类型：发明
国别省市：