分布式自动影像和视频处理制造技术

一种协作影像采集和处理的方法和系统。一个由一组网络连接的协作摄像机组成的系统，其中一部摄像机一旦确定成像事件就向协作摄像机请求成像。从采集到的视频中选择或生成描述事件的最佳视频。关于视频的额外描述被创建为机器可读的元数据形式和人类可读的文本描述。

【技术实现步骤摘要】

本专利技术涉及数码照片和视频的自动捕捉和处理。
技术介绍
在日常生活中，拍摄数码照片和视频变得日益重要。人们通常在运动、旅行和其他活动中使用免持式摄像机，并将其固定在身体、头盔或设备上。这类摄像机可在自动模式下以预定的时间间隔持续拍摄视频或照片。然而，此种方法存在一些缺点。持续拍摄期间会产生诸多大文件，这些文件中大部分都是无用和多余的照片和视频，浪费了诸多存储空间和电池寿命，而且需要耗时的搜索和处理才能提取出视频或相关照片的有趣部分。此外，由于储存空间和电池寿命有限，就需要降低分辨率和帧频，并延长照片拍摄间隔。举例来说，当使用此类摄像机每隔几秒持续拍摄一组照片时，储存空间和电池寿命甚至会在拍摄到有趣时刻或值得拍摄对象之前就已耗尽，或者在两次连续拍摄之间错过了有趣时刻。此外，由于摄像机固定在用户身体上，当用户想拍摄自己的照片时往往就无法从期望的角度进行拍摄。
技术实现思路
—种捕捉视频和静态影像的新方法随着诸多
的发展形成: 数码成像技术的发展、光学性能的改善、分辨率和影像质量的提高以及摄像机价格的降低，产生了一种新局面，那就是当用户被其他用户和摄像机包围时，该用户能从不同角度拍摄其高分辨率的影像或视频。网络连接的发展、带宽和覆盖范围的提高以及能耗和连接价格的同步降低，实现了数码相机的网络连接、必要系统信息交换以及照片和视频大文件的快速上传和下载。影像和视频处理、视频理解技术以及面部和目标识别技术的发展，实现了从不同视角对人物和环境的识别，以及对视频流中有趣场面或场景的自动识别。3D扫描、对不同视角拍摄的照片或视频的立体处理以及计算机图像生成的发展，实现了从新视角对影像或视频进行拍摄。对所拍摄视频的影像处理和理解、对身体参数的监控以及对GPS和加速度传感器的使用，实现了对用户体验的重要和激动时刻的确定，以及通过视频拍摄、摄像机拍摄或增加分辨率、画质和帧频对这些时刻进行选择性的捕捉。GPS、其他导航系统以及其他技术的发展，实现了对摄像机位置的映射和记录，以及对当前事件所关联的摄像机清单的了解。一些社交程序能够追踪用户位置、识别和标记用户并采用其他方法从照片和视频中追踪用户物理位置并识别用户。随着这些社交程序以及社交网络的日益普及和使用，能够利用位于相关位置采用相关时间间隔的摄像机，从用户亲友及其他合作用户所拍摄的照片和视频中追踪和识别用户。 通过结合使用上述一些解决方案、进行相应修改并如本披露内容所述将其组织到恰当系统，形成了一种数码成像和视频拍摄的新方法。在该方法中，可穿戴摄像机一直处于“就绪”状态，不断从处于节能“经济”模式的所有相关传感器捕捉视频、音频和其他信息，并对其进行持续处理，以识别“重要”情况。根据在适当位置和恰当时间运行的一部或多部摄像机采集到的信息，自动或半自动检测、选择或生成最重要和有趣的事件。多部摄像机可连接至网络并在事件期间协作。摄像机采集的视频和照片也可上传至网络并在之后进行处理。下面以用户在滑雪胜地滑雪这一场景为例，假设用户正在进行滑雪表演。用户摄像机自动检测到表演的开始和结束时刻，开始采集视频、影像以及适当的高品质设定。附近的其他协作摄像机也开始在相关间隔拍摄视频和影像。事件结束后，从所有摄像采集的视频被自动进行处理，然后从数部摄像机的视频中选出或生成最佳角度的最佳视频。该视频之后进行稳定处理，并基于多部摄像机的信息以及所识别个人和目标的其他影像和视频进行画质改善。通过处理固定在用户身体或设备上的摄像机所拍摄的视频、摄像机或其他装置上传感器的声音、位置、速度、加速度或其他信息，包括身体监控传感器采集的心跳和大脑活动等信息，找到表演的恰当时刻。基于其他登记和协作的摄像机的位置和视野确定相关摄像机。加速帧频、改善画质以及拍摄更高分辨率的静止影像也可应用到事件时刻的相关协作摄像机。根据类似视角拍摄的多个视频/照片，选出或生成最佳视角的最佳照片和视频。也可在之后根据所有相关摄像机的拍摄内容以及在事件时刻和地点拍摄的影像/视频数据库离线找到最佳视角的最佳照片和视频。【附图说明】根据以下附图的描述，可更充分的理解本专利技术的诸多方面。附图中的各部件并非为了放大或强调，而是为了清晰说明当前披露内容的原理。在多幅附图中，各附图中的相同部分使用相同的参考数字标记。图1是一个摄像机联网协作系统的示意图，与本专利技术的一个实施例一致。图2是协作摄像机连接和参与的说明图，与本专利技术的一个实施例一致。图3是摄像机运行和网络通讯的原理流程图，与本专利技术的一个实施例一致。图4是摄像机系统的系统方框图，与本专利技术的一个实施例一致。图5是摄像机与附近摄像机运行和协作的流程图。图6是处理用户的视频或照片改善请求的流程图。【具体实施方式】本专利技术详述如下，并附有方法、装置(系统)和计算机程序产品的流程图和/或框图，与本专利技术的实施例一致。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中多个方框的组合，都可以由计算机程序指令实现。这些计算机程序指令可在通用处理器、应用处理器和专用集成电路上执行，以创造方法实施流程图和/或框图中单个或多个方框指定的功能/操作。这些计算机程序指令也可存储在能指示计算机或其他可编程数据处理装置以特定方式工作的计算机可读介质中，这样，存储在计算机可读介质中的指令会产生一个包含指令方法的制品，实施流程图和/或框图中单个或多个方框指定的功能/操作。附图中的各部件并非为了放大或强调，而是为了清晰说明当前披露内容的原理。在多幅附图中，各附图中的相同部分使用相同的参考数字标记。本专利技术的目标之一是提供一种方法和一个系统，用于在两个及以上协作成像系统环境中自动和半自动地拍摄视频和静止影像。这种系统又称为成像器。各成像器中包含一个数字成像摄像机，能够拍摄数字静止影像、视频和/或3D视频。成像器可进一步包含一种实现成像器间通讯的网络连接，或一种实现与其他协作成像器直接通讯的装置。成像器可配备附加传感器，如GPS及其他导航定位传感器、加速度传感器、音频传感器、生物传感器等。成像器可进一步包含影像处理硬件和/或软件，并可将拍摄的影像和视频上传至网络进行处理。在本专利技术中，术语“摄像机”指能够拍摄静止影像和/或视频的数字成像摄像机。此外，在一些情况下，上文所述“成像器”也将指“摄像机”。在本专利技术中，将使用术语“影像”或“视频”代替“静止影像或视频”。术语“自动采集”指有无用户直接初始化、配置、启动、停止和选择都进行的采集。为了陈述内容的清晰简洁，这些名称变体和名称组合未列在文本中。成像器的预期用途之一是固定在用户身体或设备上，捕捉用户希望捕捉到的运动或其他活动。此类活动包括在滑雪胜地滑雪或滑雪板、在大海冲浪或风筝冲浪、骑自行车、徒步旅行等等。尽管用户会长时间穿戴成像器，但用户可能只对拍摄特定事件感兴趣。术语“成像事件”或“事件”指特别有趣的事件，这类事件可能对用户而言具有价值，并且值得提高成像质量。此类事件可基于对持续拍摄的视频和/或传感器数据的处理自动确定。通过场景、速度和用户活动的改变、对场景内相关人物或目标的检测以及对加速心率、速度、高度、压力、加速度、声音或其他信息的检测，能够检测到成像事件。我们假定成像器至少拥有两种运行模式。一种是正常模式，用于监控传感器数据，并以降低的分辨率和帧频拍本文档来自技高网...

【技术保护点】
一种通过分布式相互通讯成像器组协作拍摄成像事件影像的方法，其中：一旦一部成像器确定事件开始‑ 便开始以增强模式拍摄影像；‑ 将事件通知给协作成像器，使这些成像器也开始以增强模式拍摄该事件影像。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：罗恩·福里丹托尔，
申请(专利权)人：罗恩·福里丹托尔，
类型：发明
国别省市：以色列;IL