用于视频处理的系统和方法技术方案

本发明专利技术揭示一种视频处理的系统和方法。在特定实施方案中，一种装置包含经配置以接收视频帧序列并且存储所述视频帧序列和所述视频帧序列中的每一帧的帧索引的帧缓冲器。所述装置还包含经配置以将概要帧压缩成表示所述概要帧的经编码文件的处理器。所述概要帧包含与所述视频帧序列的第一帧索引相关联的第一视频帧中的第一位置处的对象的第一表示。所述概要帧进一步包含与关联于所述视频帧序列的第二帧索引相关联的第二视频帧中的第二位置处的对象的第二表示。所述装置还包含经配置以输出与所述概要帧相关联的通知信号的发射器。

Systems and methods for video processing

The invention discloses a video processing system and method. In a specific implementation scheme, a device includes a frame buffer configured to receive video frame sequence and store the frame index of each frame in the sequence of the video frame and the video frame sequence. The device also includes a processor configured to compress the outline frame into a coded file representing the summary frame. The outline frame contains a first representation of the object at the first position in the first video frame associated with the first frame index of the video frame sequence. The summary frame further includes a second representation of an object at the second position in the second video frame associated with the second frame index associated with the sequence of the video frames. The device also includes a transmitter configured to output notification signals associated with the summary frame.

【技术实现步骤摘要】
【国外来华专利技术】用于视频处理的系统和方法
本专利技术大体来说涉及视频处理。
技术介绍
在例如闭路电视(CCTV)系统的视频监控系统中，摄像机可被安装在固定位置中。由摄像机产生的视频内容(例如，视频流)在摄像机的视野内无移动的绝大部分时间可为平静的。多个选项可用于定位所记录视频流中的所关注事件(例如，移动)。举例来说，可通过以向前快转模式播放所记录视频来在所记录视频流中识别所关注事件。作为其它实例，可通过借助在编码时跳过帧(例如，对视频流的每第n个帧进行编码，其中n为整数)或借助产生所记录视频流的缩时视频来产生视频流的概要剪辑来识别所关注事件。这些选项中的每一者可为低效且耗时的。
技术实现思路
在一特定方面中，一种装置包含经配置以获取视频帧序列的捕获单元。每一视频帧具有帧索引。所述装置进一步包含与捕获单元电通信的帧缓冲器。所述帧缓冲器能够存储视频帧序列和相关联帧索引。所述装置还包含与帧缓冲器电子通信的处理器。所述处理器经配置以将概要帧压缩成表示概要帧的经编码文件。所述概要帧包含与所述视频帧序列的第一帧索引相关联的第一视频帧中的第一位置处的对象的第一表示。所述概要帧进一步包含与所述视频帧序列的第二帧索引相关联的第二视频帧中的第二位置处的对象的第二表示。所述装置包含与处理器电子通信的发射器。所述发射器经配置以输出与概要帧相关联的通知信号。在另一方面中，一种设备包含处理器和存储指令的存储器，所述指令可由所述处理器执行以执行包含检测对应于视频内容的一部分中的事件的运动事件周期的操作。所述视频内容包含多个图像帧，且所述视频内容的所述部分包含对象。所述操作进一步包含产生与所述视频内容的所述部分相关联的概要帧。所述概要帧说明所述对象的多个表示。所述操作还包含起始将包含所述概要帧的通知发送到装置。在另一方面中，一种设备包含用于产生与视频内容的一部分相关联的概要帧的装置。所述概要帧说明包含在所述视频内容的所述部分中的对象的多个表示。所述设备进一步包含用于将包含所述概要帧的通知发射到装置的装置。在另一特定方面中，一种操作视频监控系统的方法包含通过所述视频监控系统的第一装置将在由所述视频监控系统捕获的视频内容的一部分中检测到的运动事件的通知发送到第二装置。所述通知包含与所述视频内容的所述部分相关联的概要帧。所述视频内容的所述部分包含对象。所述概要帧说明所述对象的多个表示。所述方法进一步包含在所述第一装置处，从所述第二装置接收对与所述运动事件相关联的视频片段的请求。所述方法还包含将所述视频片段从所述第一装置发送到所述第二装置。在检视整个申请案(包含以下章节)的后，本专利技术的其它方面、优点和特征将变得显而易见：“附图说明”、“具体实施方式”和“权利要求书”。附图说明图1A为用于处理图像数据以产生概要帧的第一说明性系统的框图；图1B为用于处理图像数据以产生概要帧的第二说明性系统的框图；图1C为用于处理图像数据以产生概要帧的第三说明性系统的框图；图2为概要帧产生器的说明性实例的框图；图3为产生概要帧的方法的第一说明性实例的流程图；图4为产生概要帧的方法的第二说明性实例的流程图；图5为用于处理图像数据以传达概要帧的说明性系统的框图；图6为经配置以使用概要帧对视频内容加索引的装置的说明性实例的框图；图7A-7J为用以呈现概要帧、基于概要帧的视频内容的部分或两者的接口的实例；图8为产生概要帧的方法的第三说明性实例的流程图；图9为传达概要帧的方法的说明性实例的流程图；图10为接收概要帧的方法的说明性实例的流程图；图11为串连多个概要帧的方法的说明性实例的流程图；图12为对视频内容加索引的方法的说明性实例的流程图；和图13为可操作以支持本文中所揭示的一或多个方法、系统、设备或计算机可读存储装置的各种方面的装置的框图。具体实施方式下文参看图式描述本专利技术的特定方面。在描述中，贯穿各图式共同特征由共同参考数字指定。如本文中所使用，用于修饰元件(例如，结构、组件、操作等)的序数术语(例如，“第一”、“第二”、“第三”等)本身并不指示元件相对于另一元件的任何优先顺序或次序，而仅将元件与具有相同名称(如果不使用序数术语)的另一元件区分。本专利技术描述处理视频内容(例如，视频流(例如，视频片段))以产生概括视频内容的部分的概要帧(例如，图像)的方法。举例来说，视频内容可捕获事件，例如与对象(例如，人、汽车等)相关联的运动事件。可将视频内容提供到图像处理装置，所述图像处理装置识别视频内容内的(事件的)运动事件周期的开始和结束。举例来说，运动事件周期可与对象进入和退出摄像机的视野相关联。图像处理装置可产生与视频内容的至少一部分相关联的概要帧。概要帧可说明对象的多个表示。为了说明，响应于运动事件周期的结束，可产生概要帧并将其发送到装置(例如，远程装置)以使得用户能够迅速观看单一图像，所述单一图像概括了运动事件周期期间在视频内容中的对象的移动。作为说明性而非限制性实例，图像处理装置可被包含在摄像机或视频播放器设备。在一些实施方案中，图像处理装置可被包含在视频监控系统中且可用于对视频序列(例如，包含一或多个运动事件的视频序列)加索引。在一些实施方案中，概要帧可被包含在通知中，所述通知还包含与对应于事件的视频内容的部分相关联的识别符(例如，运动事件周期)。举例来说，识别符可被包含在经嵌入于概要帧中的元数据中。识别符可使得装置能够从视频监控系统请求视频内容的部分。在一些实施方案中，图像处理装置可产生包含多个“经串连”概要帧的通知。举例来说，图像处理装置可产生对应于第一运动事件周期的第一概要帧且可产生对应于第二运动事件周期的第二概要帧。第一运动事件周期可与由第一摄像机捕获的第一视频内容的第一部分相关联且第二运动事件周期可与由第二摄像机捕获的第二视频内容的第二部分相关联。替代地，第一运动事件周期和第二运动事件周期可为由单一摄像机捕获的视频内容的相关联部分。在一些实施方案中，经串连的概要帧可包含在第一运动事件期间第一对象的第一组表示和在第二运动事件期间第二对象的第二组表示。每一组表示可在经串连概要帧的共同背景上经叠加图像处理装置可存储在时间周期(例如，六小时周期)期间所产生的一或多个概要帧，例如第一概要帧和第二概要帧且可发送包含一或多个概要帧的单一通知。通过发送包含视频内容的部分的概要帧的通知，所述通知的数据大小与发送包含视频内容的部分的视频剪辑的通知相比可减小。因此，与包含视频剪辑的通知相比较，可将包含概要帧(且非视频剪辑)的通知更快速地提供到装置。另外，通过发送概要帧而非发送视频剪辑，装置的用户可快速检视概要帧(例如，单一图像)以了解在运动事件周期期间(例如，在视频内容的部分期间)发生的活动。参看图1A，展示可操作以产生概要帧的系统100的说明性实例。系统100可包含装置102。在一些实施方案中，装置102可被包含在视频监控系统(例如，闭路电视(CCTV)系统)中，如参看图5所描述。为说明，装置102可为摄像机装置，可包含摄像机，或可包含视频系统控制器。另外或替代地，装置102可包含播放装置或被包含在播放装置中，作为说明性、非限制实例，例如计算机、手提式计算机、移动装置、运载工具或服务器。本文中所描述的技术可与电子装置、移动装置、运载工具、游戏主机、自动系统主机(例如，ADAS)、可穿戴本文档来自技高网...

【技术保护点】
一种摄像机装置，其包括：捕获单元，其经配置以获取视频帧序列，每一视频帧具有帧索引；帧缓冲器，其与所述捕获单元电通信，能够存储所述视频帧序列和相关联帧索引；处理器，其与所述帧缓冲器电子通信，经配置以将概要帧压缩成表示所述概要帧的经编码文件，其中所述概要帧包含与所述视频帧序列的第一帧索引相关联的第一视频帧中的第一位置处的对象的第一表示，且所述概要帧包含与所述视频帧序列的第二帧索引相关联的第二视频帧中的第二位置处的所述对象的第二表示；和发射器，其与所述处理器电子通信，经配置以输出与所述概要帧相关联的通知信号。

【技术特征摘要】
【国外来华专利技术】1.一种摄像机装置，其包括：捕获单元，其经配置以获取视频帧序列，每一视频帧具有帧索引；帧缓冲器，其与所述捕获单元电通信，能够存储所述视频帧序列和相关联帧索引；处理器，其与所述帧缓冲器电子通信，经配置以将概要帧压缩成表示所述概要帧的经编码文件，其中所述概要帧包含与所述视频帧序列的第一帧索引相关联的第一视频帧中的第一位置处的对象的第一表示，且所述概要帧包含与所述视频帧序列的第二帧索引相关联的第二视频帧中的第二位置处的所述对象的第二表示；和发射器，其与所述处理器电子通信，经配置以输出与所述概要帧相关联的通知信号。2.根据权利要求1所述的装置，其中所述处理器经配置以接收对发射与所述概要帧相关联的元数据的请求。3.根据权利要求2所述的装置，其中所述元数据包含与所述第一帧索引相关联并且与所述第二帧索引相关联的指示符。4.根据权利要求1所述的装置，其中所述处理器经配置以：检测跨越所述视频帧序列中的多个视频帧发生的运动事件；和基于所述多个视频帧的子集产生所述概要帧。5.根据权利要求1所述的装置，其进一步包括模式控制器，其与所述处理器电通信，经配置以控制视频编码器是压缩所述概要帧还是压缩所述视频帧序列。6.根据权利要求5所述的装置，其中所述模式控制器经配置以进一步使得所述视频编码器能够压缩不同概要帧的串连。7.根据权利要求6所述的装置，其中所述不同概要帧的串连是基于不同可编程时间周期。8.根据权利要求1所述的装置，其进一步包括：存储器，其经配置以存储与所述第一帧索引相关联的第一数据、与所述第二帧索引相关联的第二数据、所述概要帧，或其组合；和屏幕，其经配置以显示所述概要帧。9.根据权利要求1所述的装置，其进一步包括：接收器，其经配置以接收发射所述通知信号的请求；和扬声器，其经配置以播放与所述概要帧的产生的完成相关联的声音。10.一种设备，其包括：处理器；和存储器，其存储指令，所述指令可由所述处理器执行以执行包括以下各项的操作：检测对应于视频内容的一部分中的事件的运动事件周期，所述视频内容包含多个图像帧，且其中所述视频内容的所述部分包含对象；产生与所述视频内容的所述部分相关联的概要帧，所述概要帧说明所述对象的多个表示；和起始将通知发送到装置，其中所述通知包含所述概要帧。11.根据权利要求10所述的设备，其中所述视频内容是从视频监控系统的多个摄像机中的摄像机接收，且其中所述概要帧提供所述事件的单帧视觉概要。12.根据权利要求10所述的设备，其中所述操作进一步包括：基于所述多个图像帧中的至少一个维持背景模型；基于所述多个图像帧中的第一图像帧与所述背景模型的比较，识别所述运动事件周期的开始；基于所述多个图像帧中的第二图像帧与所述背景模型的比较，识别所述运动事件周期的结束；和基于所述第一图像帧、所述第二图像帧或两者，对所述视频内容加索引。13.根据权利要求10所述的设备，其中所述操作进一步包括选择所述多个图像帧中的两个或更多个图像帧作为关键帧。14.根据权利要求13所述的设备，其中所述操作进一步包括：基于所述多个图像帧中的至少一个维持背景模型；在所述运动事件周期期间缓冲所述两个或更多个图像帧；和对于所述两个或更多个图像帧中的每一者，将来自所述图像帧的所述...

【专利技术属性】
技术研发人员：毕宁，凌璠，丁菁汀，孙煜，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国,US