视频和音频的同步方法、设备及无人机技术

本发明专利技术实施例提供一种视频和音频的同步方法、设备及无人机，该方法包括：获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步；根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐。从而实现了视频信息和音频信息的自动化对齐同步，提高了同步效率。

Video and audio synchronization methods, equipment and UAV

The embodiment of the present invention provides a video and audio synchronization method, equipment and UAV, which includes: acquiring video information captured by a video capturing device carried by an UAV, and acquiring audio information recorded by a recording device, wherein the video capturing device and the recording device are synchronized in time; and according to the said device The time stamp information included in the video information and the time stamp information included in the audio information are aligned to the video information and the audio information. Thus, the automatic alignment synchronization of video and audio information is realized, and the synchronization efficiency is improved.

【技术实现步骤摘要】
【国外来华专利技术】视频和音频的同步方法、设备及无人机
本申请涉及同步技术，尤其涉及一种视频和音频的同步方法、设备及无人机。
技术介绍
现有的航拍无人机，由于螺旋桨噪声大，加上被拍摄目标距离较远，因而所拍摄的视频基本都是无声视频，其音效信息都是通过后期处理加入的背景音乐或者现场录音。尤其是在加入现场录音时，为了实现音画同步，需要人工手动对音频和视频进行同步，操作复杂，且效率较低。
技术实现思路
本专利技术实施例提供一种视频和音频的同步方法、设备及无人机，以实现音频与视频的自动同步，提高音频和视频的同步效率。本专利技术实施例的第一方面是提供一种视频和音频的同步方法，包括：获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步；根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐。本专利技术实施例的第二方面是提供一种视频和音频的同步方法，包括：获取无人机搭载的视频拍摄设备拍摄的视频信息；在所述视频信息中生成时间戳信息；将生成有时间戳信息的视频信息发送给同步设备，以使所述同步设备根据所述视频信息中的时间戳信息，以及所述同步设备获取的录音设备录制的音频信息中的时间戳信息，对所述视频信息和所述音频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。本专利技术实施例的第三方面是提供一种视频和音频的同步方法，包括：获取无人机遥控器上的录音设备录制的音频信息；在所述音频信息中生成时间戳信息；将生成有时间戳信息的音频信息发送给同步设备，以使所述同步设备根据所述音频信息中的时间戳信息，以及所述同步设备获取到的视频拍摄设备拍摄的视频信息中的时间戳信息，对所述音频信息和所述视频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。本专利技术实施例的第四方面是提供一种同步设备，包括：通信接口、一个或多个处理器；所述一个或多个处理器单独或协同工作，所述通信接口和所述处理器连接；所述通信接口用于：获取无人机上搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步；所述处理器用于：根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐。本专利技术实施例的第五方面是提供一种控制设备，包括：通信接口、一个或多个处理器；所述一个或多个处理器单独或协同工作，所述通信接口和所述处理器通讯连接；所述通信接口用于：获取无人机搭载的视频拍摄设备拍摄的视频信息；所述处理器用于：在所述视频信息中生成时间戳信息；所述通信接口用于：将生成有时间戳信息的视频信息发送给同步设备，以使所述同步设备根据所述视频信息中的时间戳信息，以及所述同步设备获取的录音设备录制的音频信息中的时间戳信息，对所述视频信息和所述音频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。本专利技术实施例的第六方面是提供一种控制设备，包括：通信接口、一个或多个处理器；所述一个或多个处理器单独或协同工作，所述通信接口和所述处理器通讯连接；所述通信接口用于：获取无人机遥控器上的录音设备录制的音频信息；所述处理器用于：在所述音频信息中生成时间戳信息；所述通信接口用于：将生成有时间戳信息的音频信息发送给同步设备，以使所述同步设备根据所述音频信息中的时间戳信息，以及所述同步设备获取到的视频拍摄设备拍摄的视频信息中的时间戳信息，对所述音频信息和所述视频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。本专利技术实施例的第七方面是提供一种无人机，包括：机身；动力系统，安装在所述机身，用于提供飞行动力；视频拍摄设备，安装在所述机身，用于拍摄视频；以及如上述第五方面所述的控制设备。本专利技术实施例的第八方面是提供一种遥控器，包括：本体部；安装于所述本体部的摇杆；录音设备，安装于所述本体部，用于录制音频信息；以及如权利要求第六方面任一项所述的控制设备。本实施例提供的视频和音频的同步方法、设备及无人机，通过同步设备获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，并根据视频信息中包括的时间戳信息和音频信息中包括的时间戳信息，对视频信息和音频信息进行对齐，从而实现了音频信息和视频信息的自动同步，不需要人工手动操作，同步的准确度和效率较高。附图说明图1为本专利技术实施例提供的视频和音频的同步方法的流程图；图2为本专利技术另一实施例提供的视频和音频的同步方法的流程图；图3为本专利技术又一实施例提供的视频和音频的同步方法的流程图；图4为本专利技术实施例提供的同步设备的结构图；图5为本专利技术实施例提供的控制设备的结构图；图6为本专利技术实施例提供的控制设备的结构图；图7为本专利技术实施例提供的无人机的结构图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。需要说明的是，当组件被称为“固定于”另一个组件，它可以直接在另一个组件上或者也可以存在居中的组件。当一个组件被认为是“连接”另一个组件，它可以是直接连接到另一个组件或者可能同时存在居中组件。除非另有定义，本文所使用的所有的技术和科学术语与属于本专利技术的
的技术人员通常理解的含义相同。本文中在本专利技术的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本专利技术。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。下面结合附图，对本专利技术的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。本专利技术实施例提供一种视频和音频的同步方法。图1为本专利技术实施例提供的视频和音频的同步方法的流程图。如图1所示，本实施例中的方法，可以包括：步骤101、获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步。本实施例的执行主体可以是同步设备，该同步设备可以设置在诸如无人飞行器、无人船或无人车等无人机上，或者无人机的遥控器上，再或者也可以独立的设置在地面端。当同步设备设置在无人机或无人机的遥控器上时，该同步设备是一种具有计算功能和/或处理功能的设备。当控制设备独立的设置在地面端时，该同步设备可以是智能手机、平板电脑、地面控制站、膝上型电脑、手表等。同步设备与无人机上的飞行控制器通过应用程序编程接口(ApplicationProgrammingInterface，简称API)连接，具体的，当同步设备设置在无人机上时，同步设备与无人机的飞行控制器可以通过有线的方式连接，例如通过如下至少一种方式连接：通用异步收发传输器(UniversalAsynchronousReceiver/Transmitter，简称UART)、通用串行总线(UniversalSerialBus，简称USB)、飞行控制器局域网络(ControllerAreaNetwork,简称CAN)总线连接。当同步设备独立的设置在地面端时，同步设备与无人机的飞行控制器可以通本文档来自技高网...

【技术保护点】
1.一种视频和音频的同步方法，其特征在于，包括：获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步；根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐。

【技术特征摘要】
【国外来华专利技术】1.一种视频和音频的同步方法，其特征在于，包括：获取无人机搭载的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，其中，所述视频拍摄设备和所述录音设备的时间同步；根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐。2.根据权利要求1所述的方法，其特征在于，所述视频信息对应的视频文件的文件头中包括时间戳信息；以及所述音频信息对应的音频文件的文件头中包括时间戳信息。3.根据权利要求2所述的方法，其特征在于，所述根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐，包括：根据所述视频信息中视频文件的时间戳信息，以及所述音频信息中音频文件的时间戳信息，对所述视频信息中的视频文件和所述音频信息中的音频文件进行对齐。4.根据权利要求1所述的方法，其特征在于，所述获取无人机上装配的视频拍摄设备拍摄的视频信息，以及获取录音设备录制的音频信息，包括：接收所述视频拍摄设备发送的以帧为单位的视频信息，以及接收所述录音设备发送的以帧为单位的音频信息。5.根据权利要求4所述的方法，其特征在于，所述视频信息的每个视频帧的帧头中均包括时间戳信息，所述音频信息的每个音频帧的帧头中均包括时间戳信息。6.根据权利要求5所述的方法，其特征在于，所述根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐，包括：将包括相同时间戳信息的视频帧和音频帧进行对齐。7.根据权利要求4所述的方法，其特征在于，所述视频信息中间隔预设帧数的视频帧包括时间戳信息，所述音频信息中间隔所述预设帧数的音频帧包括时间戳信息。8.根据权利要求7所述的方法，其特征在于，所述根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐，包括：根据间隔预设帧数的视频帧包括的时间戳信息，以及间隔预设帧数的音频帧包括的时间戳信息，对间隔预设帧数的视频帧和间隔预设帧数的音频帧进行对齐。9.根据权利要求1-8中任一项所述的方法，其特征在于，所述视频信息和所述音频信息的时间戳信息均包括所述视频拍摄设备和所述录音设备通信时使用的帧号。10.根据权利要求9所述的方法，其特征在于，所述根据所述视频信息中包括的时间戳信息和所述音频信息中包括的时间戳信息，对所述视频信息和所述音频信息进行对齐，包括：根据所述视频信息中包括的帧号和所述音频信息中包括的帧号，对所述视频信息和所述音频信息进行对齐。11.一种视频和音频的同步方法，其特征在于，包括：获取无人机搭载的视频拍摄设备拍摄的视频信息；在所述视频信息中生成时间戳信息；将生成有时间戳信息的视频信息发送给同步设备，以使所述同步设备根据所述视频信息中的时间戳信息，以及所述同步设备获取的录音设备录制的音频信息中的时间戳信息，对所述视频信息和所述音频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。12.根据权利要求11所述的方法，其特征在于，所述在所述视频信息中生成时间戳信息，包括：在视频信息对应的视频文件的文件头中生成时间戳信息。13.根据权利要求11所述的方法，其特征在于，所述在所述视频信息中生成时间戳信息，包括：在所述视频信息中的每个视频帧的帧头中生成时间戳信息。14.根据权利要求11所述的方法，其特征在于，所述在所述视频信息中生成时间戳信息，包括：在所述视频信息中，间隔预设帧数的视频帧生成一个时间戳信息。15.根据权利要求11-14中任一项所述的方法，其特征在于，所述视频信息和所述音频信息的时间戳信息均包括所述视频拍摄设备和所述录音设备通信时使用的帧号。16.一种视频和音频的同步方法，其特征在于，包括：获取无人机遥控器上的录音设备录制的音频信息；在所述音频信息中生成时间戳信息；将生成有时间戳信息的音频信息发送给同步设备，以使所述同步设备根据所述音频信息中的时间戳信息，以及所述同步设备获取到的视频拍摄设备拍摄的视频信息中的时间戳信息，对所述音频信息和所述视频信息进行对齐，其中，所述视频拍摄设备和所述录音设备的时间同步。17.根据权利要求16所述的方法，其特征在于，所述在所述音频信息中生成时间戳信息，包括：在所述音频信息对应的音频文件的文件头中生成时间戳信息。18.根据权利要求16所述的方法，其特征在于，所述在所述音频信息中生成时间戳信息，包括：在所述音频信息中的每帧音频帧的帧头中生成时间戳信息。19.根据权利要求16所述的方法，其特征在于，所述在所述音频信息中生成时间戳信息，包括：在所述音频信息中，间隔预设帧数的音频帧生成一个时间戳信息。20.根据权利要求16-19中任一项所述的方法，其特征在于，所述视频信息和所述音频信息的时间戳信息均包括所述视频拍摄设备和所述录音设备通信时使用的帧号。21.一种同步设备，其特征在于，该设备包括：通信接口、一个或多个处理器；所述一个或多个处理器单独或协同工作，所述通信接口和所述处理器连接；所述通信接口用...

【专利技术属性】
技术研发人员：张志鹏，尹小俊，王乃博，马宁，
申请(专利权)人：深圳市大疆创新科技有限公司，
类型：发明
国别省市：广东,44