声画同步优化方法、装置及可读存储介质制造方法及图纸

本发明专利技术公开一种声画同步优化方法，应用于视频录制，包括以下步骤：在图像采集阶段，播放音频数据并读取该音频数据的显示时间戳；将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。本发明专利技术还公开一种声画同步优化装置及计算机可读存储介质。本发明专利技术可以实现视频录制过程中的声音与画面同步，进而提升用户观看视频的使用体验。

Sound and painting synchronization optimization method, device and readable storage medium

The simultaneous optimization of the invention discloses a method of sound and picture, used in video recording, which comprises the following steps: in the image acquisition stage, the playback of audio data and display the timestamp to read the audio data; will display the timestamps of a frame of image data acquisition and the currently playing audio frames of data in image encoding stage; judge, display the current actual encoding image data of one frame of a frame of the audio data if the time stamp and bound to display the same timestamp; if the same, then continue to a frame of image data encoding, image data or discard the current encoding. The invention also discloses a sound drawing synchronization optimization device and a computer readable storage medium. The invention can synchronize the sound and the picture in the video recording process, and then improve the user experience of watching video.

【技术实现步骤摘要】
声画同步优化方法、装置及可读存储介质
本专利技术涉及视频录制
，尤其涉及一种声画同步优化方法、装置及可读存储介质。
技术介绍
随着网络信息技术的越来越成熟，越来越多的移动应用功能被不断扩展并逐渐融入人们的日常生活中，比如娱乐搞笑小视频，用户通过手机摄像头录制各种小视频，然后再通过网络进行分享，此类小视频通常都是语音与画面同时进行录制的。为进一步丰富小视频的搞笑内容，现有移动应用中出现了只录制画面，然后再将录制的画面与已编码的声音进行合成，进而形成小视频的实现方式，此类方式虽然通过声音提升了小视频的搞笑程度，但由于声音与画面不是同步录制，同时不同手机的性能不一样且摄像头的采集帧率不恒定，进而导致播放的小视频经常出现声音画面不同步的问题，降低了用户观看小视频的使用体验。
技术实现思路
本专利技术的主要目的在于提供一种声画同步优化方法、装置及可读存储介质，旨在解决如何实现视频录制过程中声音与画面同步的技术问题。为实现上述目的，本专利技术提供一种声画同步优化方法，应用于视频录制，所述声画同步优化方法包括以下步骤：在图像采集阶段，播放音频数据并读取该音频数据的显示时间戳；将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。可选地，在播放音频数据之前，所述声画同步优化方法还包括：从服务端下载录制视频所采用的音频数据及其对应文字内容，并在播放音频数据时，显示所述文字内容。可选地，所述声画同步优化方法还包括：将已编码的图像数据及下载的音频数据进行音视频编码，得到录制的视频文件并保存。可选地，所述声画同步优化方法还包括：在进入视频文件编辑模式时，基于用户操作，依序预览显示所述视频文件的各帧图像数据；对预览显示的图像数据进行编辑处理，以供在所述视频文件中新增或删除图像数据。可选地，在将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定之前，所述声画同步优化方法还包括：获取当前播放的音频数据的采样频率；基于该音频数据的采样频率，调整当前图像数据的采集帧率。进一步地，为实现上述目的，本专利技术还提供一种声画同步优化装置，应用于视频录制，所述声画同步优化装置包括：存储有声画同步优化程序的存储器；处理器，配置为执行所述声画同步优化程序以执行下述操作：在图像采集阶段，播放音频数据并读取该音频数据的显示时间戳；将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。可选地，在执行播放音频数据之前，所述处理器还执行所述声画同步优化程序以执行下述操作：从服务端下载录制视频所采用的音频数据及其对应文字内容，并在播放音频数据时，显示所述文字内容。可选地，所述处理器还执行所述声画同步优化程序以执行下述操作：将已编码的图像数据及下载的音频数据进行音视频编码，得到录制的视频文件并保存。可选地，所述处理器还执行所述声画同步优化程序以执行下述操作：在进入视频文件编辑模式时，基于用户操作，依序预览显示所述视频文件的各帧图像数据；对预览显示的图像数据进行编辑处理，以供在所述视频文件中新增或删除图像数据。进一步地，为实现上述目的，本专利技术还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有声画同步优化程序，所述声画同步优化程序被处理器执行时实现如上述任一项所述的声画同步优化方法的步骤。本专利技术中，在图像采集阶段，依次将采集的一帧图像数据与播放的一帧音频数据的显示时间戳进行绑定，然后在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则当前一帧图像数据符合同步要求，并继续编码下一帧图像数据，否则当前一帧图像数据不符合同步要求，进而丢弃当前编码的图像数据。本专利技术的优化方式实现了视频录制过程中的声音与画面同步，进而提升了用户观看视频的使用体验。附图说明图1为本专利技术实施例方案涉及的声画同步优化装置运行环境的结构示意图；图2为本专利技术声画同步优化方法一实施例的流程示意图。本专利技术目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。如图1所示，图1是本专利技术实施例方案涉及的声画同步优化装置运行环境的结构示意图。本专利技术中，声画同步优化装置可以是智能自动终端，比如智能手机、IPAD等，也可以是带摄像功能的计算机、笔记本等。如图1所示，该声画同步优化装置可以包括：处理器1001，例如CPU，通信总线1002、用户接口1003，网络接口1004，存储器1005，摄像头1006。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。摄像头1006用于拍摄录制视频。本领域技术人员可以理解，图1中示出的声画同步优化装置的硬件结构并不构成对声画同步优化装置的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。如图1所示，作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及计算机程序，比如声画同步优化程序等。其中，操作系统是管理和控制声画同步优化装置与软件资源的程序，支持网络通信模块、用户接口模块、声画同步优化程序以及其他程序或软件的运行；网络通信模块用于管理和控制通信总线1002；用户接口模块用于管理和控制用户接口1003。在图1所示的声画同步优化装置硬件结构中，网络接口1004主要用于连接网络进行数据通信；用户接口1003主要用于连接用户端，与用户端进行数据通信；声画同步优化装置通过处理器1001调用存储器1005中存储的声画同步优化程序，以执行以下操作：在图像采集阶段，播放已编码的音频数据，并将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。进一步地，所述声画同步优化装置通过处理器1001调用存储器1005中存储的声画同步优化程序，以执行以下操作：从服务端下载录制视频所采用的音频数据及其对应文字内容，并在播放音频数据时，显示所述文字内容。进一步地，所述声画同步优化装置通过处理器1001调用存储器1005中存储的声画同步优化程序，以执行以下操作：将已编码的图像数据及下载的音频数据进行音视频编码，得到录制的视频文件并保存。进一步地，所述声画同步优化装置通过处理器1001调用存储器1005中存储的声画同步优化程序，以执行以本文档来自技高网...

【技术保护点】
一种声画同步优化方法，应用于视频录制，其特征在于，所述声画同步优化方法包括以下步骤：在图像采集阶段，播放音频数据并读取该音频数据的显示时间戳；将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。

【技术特征摘要】
1.一种声画同步优化方法，应用于视频录制，其特征在于，所述声画同步优化方法包括以下步骤：在图像采集阶段，播放音频数据并读取该音频数据的显示时间戳；将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定；在图像编码阶段，判断当前一帧图像数据实际编码的显示时间戳是否与绑定的一帧音频数据的显示时间戳相同；若相同，则继续编码下一帧图像数据，否则丢弃当前编码的图像数据。2.如权利要求1所述的声画同步优化方法，其特征在于，在播放音频数据之前，所述声画同步优化方法还包括：从服务端下载录制视频所采用的音频数据及其对应文字内容，并在播放音频数据时，显示所述文字内容。3.如权利要求2所述的声画同步优化方法，其特征在于，所述声画同步优化方法还包括：将已编码的图像数据及下载的音频数据进行音视频编码，得到录制的视频文件并保存。4.如权利要求3所述的声画同步优化方法，其特征在于，所述声画同步优化方法还包括：在进入视频文件编辑模式时，基于用户操作，依序预览显示所述视频文件的各帧图像数据；对预览显示的图像数据进行编辑处理，以供在所述视频文件中新增或删除图像数据。5.如权利要求1所述的声画同步优化方法，其特征在于，在将当前采集的一帧图像数据与当前播放的一帧音频数据的显示时间戳绑定之前，所述声画同步优化方法还包括：获取当前播放的音频数据的采样频率；基于该音频数据的采样频率，调整当前图像数据的采集帧率。6.一种声画同步优化装置，应用于视频录制，其特征...

【专利技术属性】
技术研发人员：邓一雷，陈金源，廖宇辉，
申请(专利权)人：广州酷狗计算机科技有限公司，
类型：发明
国别省市：广东,44