在慢动作视频捕获的情况下的放大或缩小制造技术

描述了用于生成视频内容的设备的各方面。该设备包括：第一摄像头；以及一个或多个处理器，其耦合到第一摄像头并且被配置为：接收由第一摄像头以第一速率捕获的第一帧集合；处理第一帧集合以生成用于显示的视频内容；接收对于放大或缩小的选择；在放大或缩小到用于所第一摄像头的变焦门限期间，接收由第一摄像头以小于第一速率的第二速率捕获的第二帧集合；处理第二帧集合以生成用于显示的视频内容；以及以小于第一速率的第三速率来生成包括第一帧集合和第二帧集合的用于回放的视频内容。集合和第二帧集合的用于回放的视频内容。集合和第二帧集合的用于回放的视频内容。

【技术实现步骤摘要】
【国外来华专利技术】在慢动作视频捕获的情况下的放大或缩小
[0001]本申请要求享受于2021年1月22日递交的美国申请No.17/156,219的优先权，该美国申请的全部内容通过引用的方式被并入本文中。


[0002]本公开内容涉及图像处理。

技术介绍

[0003]相机设备包括捕获帧(例如，图像)的一个或多个摄像头。相机设备的示例包括独立的数字相机或数字视频摄像机、配备有摄像头的无线通信设备手机(诸如具有一个或多个摄像头的移动电话)、蜂窝或卫星无线电电话、配备有摄像头的个人数字助理(PDA)、面板或平板设备、游戏设备、包括摄像头的计算机设备(诸如所谓的“网络摄像头”)或具有数字成像或视频能力的任何设备。
[0004]相机设备处理所捕获的帧并且输出帧以用于显示。在一些示例中，相机设备以第一速率来捕获帧，并且以小于第一速率的第二速率来显示帧。以小于捕获帧的第一速率的第二速率来显示帧的结果是图像内容看起来以慢动作移动。

技术实现思路

[0005]概括而言，本公开内容描述了用于在多摄像头设备中的具有放大或缩小能力的慢动作视频捕获的技术。相机设备上的摄像头中的每个摄像头可以与在相应的变焦门限之间的变焦因子范围相关联。例如，用于第一摄像头的变焦因子可以在所捕获的图像内容的0.5x到1x放大率之间。在该示例中，变焦因子范围是从0.5x放大率到1x放大率，第一变焦门限是0.5x，并且第二变焦门限是1x。设备的其它摄像头可以具有其它变焦因子范围(例如，从1x到2x放大率等)。此外，摄像头中的每个摄像头可以被配置为根据相应的摄像头参数来捕获帧。为了进行放大(例如，增加放大率)或缩小(例如，减小放大率)，摄像头处理器基于用于第一摄像头的摄像头参数来处理由第一摄像头捕获的帧，直到达到用于第一摄像头的变焦门限，在此刻，摄像头处理器处理由第二摄像头捕获的帧(例如，摄像头处理器从广角摄像头切换到长焦摄像头)。
[0006]在一个或多个示例中，在放大或缩小期间(例如，在由第一摄像头捕获的帧从当前变焦因子放大或缩小到变焦门限的时间期间)，第一摄像头可以被配置为以与在不进行放大或缩小时第一摄像头可以捕获帧的速率相比更低的帧速率来捕获帧。如更详细地描述的，通过在放大或缩小期间降低捕获速率，示例技术可以减少由第一摄像头捕获并且在显示由第二摄像头捕获的帧之前显示的差质量帧的数量。
[0007]例如，在慢动作中，所捕获的帧是以与捕获帧的速率相比更低的速率来显示的。此外，在放大或缩小期间，摄像头参数可能没有被优化，从而导致在从当前变焦因子放大或缩小到变焦门限的时间期间所捕获的帧的较差的图像质量。在慢动作中，如果存在具有差图像质量的许多帧，则对观看者体验产生负面影响。通过减少被捕获并且然后被显示的差质
量帧的数量，示例技术可以改进相机设备的整体操作，使得即使在启用慢动作视频捕获时，所得到的设备也可以提供放大或缩小能力。
[0008]在一个示例中，本公开内容描述了一种用于生成视频内容的设备，所述设备包括：第一摄像头；以及一个或多个处理器，其耦合到所述第一摄像头并且被配置为：接收由所述第一摄像头以第一速率捕获的第一帧集合；处理所述第一帧集合以生成用于显示的视频内容；接收对于放大或缩小的选择；在所述放大或缩小到用于所述第一摄像头的变焦门限期间，接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合；处理所述第二帧集合以生成用于显示的视频内容；以及以小于所述第一速率的第三速率来生成包括所述第一帧集合和所述第二帧集合的用于回放的视频内容。
[0009]在一个示例中，本公开内容描述了一种用于生成视频内容的方法，所述方法包括：利用一个或多个处理器接收由第一摄像头以第一速率捕获的第一帧集合；利用所述一个或多个处理器处理所述第一帧集合以生成用于显示的视频内容；利用所述一个或多个处理器接收对于放大或缩小的选择；在所述放大或缩小到用于所述第一摄像头的变焦门限期间，利用所述一个或多个处理器接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合；利用所述一个或多个处理器处理所述第二帧集合以生成用于显示的视频内容；以及利用所述一个或多个处理器以小于所述第一速率的第三速率来生成包括所述第一帧集合和所述第二帧集合的用于回放的视频内容。
[0010]在一个示例中，本公开内容描述了一种在其上存储指令的计算机可读存储介质，所述指令在被执行时使得一个或多个处理器进行以下操作：接收由第一摄像头以第一速率捕获的第一帧集合；处理所述第一帧集合以生成用于显示的视频内容；接收对于放大或缩小的选择；在所述放大或缩小到用于所述第一摄像头的变焦门限期间，接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合；处理所述第二帧集合以生成用于显示的视频内容；以及以小于所述第一速率的第三速率来生成包括所述第一帧集合和所述第二帧集合的用于回放的视频内容。
[0011]在一个示例中，本公开内容描述了一种用于生成视频内容的设备，所述设备包括：用于接收由第一摄像头以第一速率捕获的第一帧集合的单元；用于处理所述第一帧集合以生成用于显示的视频内容的单元；用于接收对于放大或缩小的选择的单元；用于在所述放大或缩小到用于所述第一摄像头的变焦门限期间，接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合的单元；用于处理所述第二帧集合以生成用于显示的视频内容的单元；以及用于以小于所述第一速率的第三速率来生成用于回放的视频内容的单元，所述视频内容包括所述第一帧集合和所述第二帧集合。
[0012]在附图和以下描述中阐述了一个或多个示例的细节。根据描述、附图以及权利要求书，其它特征、目的和优点将是显而易见的。
附图说明
[0013]图1是被配置为执行在本公开内容中描述的示例技术中的一种或多种示例技术的设备的框图。
[0014]图2是进一步详细地示出图1的设备的相机处理器的框图。
[0015]图3是示出用于实现放大或缩小的示例方式的概念图。
[0016]图4是示出放大或缩小的示例的时序图。
[0017]图5是示出根据在本公开内容中描述的一个或多个示例的操作的示例方法的流程图。
具体实施方式
[0018]在本公开内容中描述的示例技术涉及多摄像头设备中的具有放大或缩小能力的慢动作视频捕获。相机设备可以包括多个摄像头以支持对视频内容的放大或缩小。例如，相机设备可以包括超宽摄像头(例如，被配置为捕获大于120
°
的视角，诸如120
°
到180
°
)、宽摄像头(例如，被配置为捕获大于60
°
的视角，诸如60
°
到120
°
)和长焦摄像头(例如，被配置为捕获小于60
°
的视角，诸如10
°
到60
°
)。多个摄像头中的每个摄像头可以与相应的变焦因子范围和变焦门限相关联。例如，超宽摄像头可以提供0.5x到1x的变焦因子范围，其中0.5x和1x是变焦门限。宽摄像头可以本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于生成视频内容的设备，所述设备包括：第一摄像头；以及一个或多个处理器，其耦合到所述第一摄像头并且被配置为：接收由所述第一摄像头以第一速率捕获的第一帧集合；处理所述第一帧集合以生成用于显示的视频内容；接收对于放大或缩小的选择；在所述放大或缩小到用于所述第一摄像头的变焦门限期间，接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合；处理所述第二帧集合以生成用于显示的视频内容；以及以小于所述第一速率的第三速率来生成包括所述第一帧集合和所述第二帧集合的用于回放的视频内容。2.根据权利要求1所述的设备，其中，接收所述对于放大或缩小的选择包括：在启用慢动作的视频捕获的情况下接收所述对于放大或缩小的选择，并且其中，接收所述第二帧集合包括：在启用慢动作的视频捕获的情况下接收所述第二帧集合。3.根据权利要求1所述的设备，其中，所述第一摄像头是耦合到所述一个或多个处理器的多个摄像头中的一者，其中，所述设备包括所述多个摄像头中的第二摄像头，其中，在达到用于所述第一摄像头的所述变焦门限之后，所述一个或多个处理器被配置为：接收由所述多个摄像头中的所述第二摄像头以大于所述第二速率的第四速率捕获的第三帧集合；以及处理所述第三帧集合以生成用于显示的视频内容，其中，生成用于回放的视频内容包括：以所述第三速率来生成包括所述第一帧集合、所述第二帧集合和所述第三帧集合的用于回放的视频内容。4.根据权利要求3所述的设备，其中，在所述第一摄像头捕获所述第一帧集合期间或之前，所述一个或多个处理器被配置为确定用于所述多个摄像头中的每个摄像头的自动聚焦(AF)、自动白平衡(AWB)和自动曝光控制(AEC)参数中的一项或多项，并且其中，接收由所述第二摄像头捕获的所述第三帧集合包括：基于在所述第一摄像头捕获所述第一帧集合期间或之前针对所述第二摄像头确定的AF和AEC参数中的一项或多项来接收所述第三帧集合。5.根据权利要求1所述的设备，其中，处理所述第二帧集合包括：执行数字放大或数字缩小直到达到用于所述第一摄像头的所述变焦门限，其中，执行数字放大或数字缩小直到达到用于所述第一摄像头的所述变焦门限包括：在变焦因子的增加或减小期间对所述第二帧集合执行裁剪和大小调整。6.根据权利要求1所述的设备，其中，所述变焦门限包括第一变焦门限，其中，所述第一摄像头是耦合到所述一个或多个处理器的多个摄像头中的一者，其中，在达到用于所述第一摄像头的所述第一变焦门限之后，所述一个或多个处理器被配置为：与处理所述第二帧集合并行地，接收由所述多个摄像头中的第二摄像头捕获的第三帧集合；以及处理所述第三帧集合，其中，生成用于回放的视频内容包括：以所述第三速率来生成用于回放的视频内容，所述用于回放的视频内容包括所述第一帧集合、直到达到用于所述第一摄像头的第二变焦门
限的所述第二帧集合、以及在达到用于所述第一摄像头的所述第二变焦门限之后的所述第三帧集合，并且其中，所述第一摄像头和所述第二摄像头两者被配置为以大于或等于所述第一变焦门限并且小于或等于所述第二变焦门限的变焦因子进行操作。7.根据权利要求1所述的设备，其中，所述第一速率大于或等于120帧每秒。8.根据权利要求1所述的设备，其中，所述第三速率等于所述第二速率。9.根据权利要求1所述的设备，其中，接收对于放大或缩小的选择包括以下各项中的一项：接收指示用于变焦动作的对捏的信息；或者接收指示对于变焦的选择的信息。10.根据权利要求1所述的设备，其中，与所述第一帧集合的图像质量相比，所述第二帧集合的图像质量较差。11.一种用于生成视频内容的方法，所述方法包括：利用一个或多个处理器接收由第一摄像头以第一速率捕获的第一帧集合；利用所述一个或多个处理器处理所述第一帧集合以生成用于显示的视频内容；利用所述一个或多个处理器接收对于放大或缩小的选择；在所述放大或缩小到用于所述第一摄像头的变焦门限期间，利用所述一个或多个处理器接收由所述第一摄像头以小于所述第一速率的第二速率捕获的第二帧集合；利用所述一个或多个处理器处理所述第二帧集合以生成用于显示的视频内容；以及利用所述一个或多个处理器以小于所述第一速率的第三速率来生成包括所述第一帧集合和所述第二帧集合的用于回放的视频内容。12.根据权利要求11所述的方法，其中，接收所述对于放大或缩小的选择包括：在启用慢动作的视频捕获的情况下接收所述对于放大或缩小的选择，并且其中，接收所述第二帧集合包括：在启用慢动作的视频捕获的情况下接收所述第二帧集合。13.根据权利要求11所述的方法，其中，所述第一摄像头是耦合到所述一个或多个处理器的多个摄像头中的一者，所述方法还包括：在达到用于所述第一摄像头的所述变焦门限之后：接收由所述多个摄像头中的第二摄像头以大于所述第二速率的第四速率捕获的第三帧集合；以及处理所述第三帧集合以生成用于显示的视频内容，其中，生成用于回放的视频内容包括：以所述第三速率来生成包括所述第一帧集合、所述第二帧集合和所述第三帧集合的用于回放的视频内容。14.根据权利要求13所述的方法，还包括：在所述第一摄像头捕获所述第一帧集合期间或之前，确定用于所述多个摄像头中的每个摄像头的自动聚焦(AF)、自动白平衡(AWB)和自动曝光控制(AEC)参数中的一项或多项，并且其中，接收由所述第二摄像头捕获的所述第三帧集合包...

【专利技术属性】
技术研发人员：S，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：