一种音视频综合处理系统及方法技术方案

本发明专利技术涉及一种音视频综合处理系统及方法，该系统包括：视频监视模块，监视采集的视频信号；音频监听模块，监听采集的音频信号；视频编辑模块，对多路视频信号实时进行编辑，形成目标画面；视频编码模块，是对编辑后的画面进行实时编码(H264)供后序录像或直播；音频编码模块，对音频信号分别进行AAC编码和G711编码，分别提供给录像和直播；第一音视频同步模块为录像专用；第二音视频同步模块为直播专用，录像模块，是对同步后音(AAC)视(H264)频实时写入PM4文件，直播模块采用私有协议在一定范围内实时网上直播。本发明专利技术的技术方案，以软件方法实现音视频的采集、编辑、编码、录像和网上直播功能，功能集成度高，更新升级维护成本低，应用范围更广。

【技术实现步骤摘要】
一种音视频综合处理系统及方法
本专利技术涉及音视频处理
，具体涉及一种音视频综合处理系统及方法。
技术介绍
录像是指用光学、电磁等方法把图像记录下来，也指记录下来的图像。广播电视词典对直播界定为"广播电视节目的后期(haobc)合成、播出同时进行的播出方式"。按播出场合可分为现场直播和播音室或演播室直播等形式。电视现场直播为在现场随着事件的发生、发展进程同时制作和播出电视节目的播出方式，是充分体现广播电视媒介传播优势的播出方式。目前，网络媒体自身还没准确抽象概括出网络直播的界定，为方便起见，不妨参照传播学及电视现场直播的概念给网络直播下个简单的定义：在现场随着事件的发生、发展进程同步制作和发布信息，具有双向流通过程的信息网络发布方式。其形式也可分为现场直播、演播室访谈式直播、文字图片直播、视音频直播或由电视(第三方)提供信源的直播；而且具备海量存储，查寻便捷的功能。现有技术中，高清(720p/1080p)录像和直播都是通过硬件实现的，例如：利用摄像机采集视频源的视频信号，利用话筒采集音频源的音频信号，利用视频监视器对摄像机采集的视频信号进行播放显示，利用音频监听器对话筒采集的音频信号进行播放收听，利用视频编码器对视频信号进行编码，利用音频编码器对音频信号进行编码，利用音视频同步模块对音频信号和视频信号进行同步等，上述提及的视频监视器、音频监听器、视频编码器、音频编码器等在现有技术中都是有对应的硬件设备存在的，用户需要录像和直播时，需要将这些硬件设备搭建起来，然后进行录像和直播。现有技术中，这种采用硬件设备进行录像和直播的缺点在于：1、设备占用空间面积大，对使用环境有要求。2、由于设备多，耗电大，不够节能。3、设备硬件更新升级时，有时候由于硬件兼容问题，需要进行整体替换，使用成本高。4、设备硬件维护成本高，搬运不便，使得应用范围受限。
技术实现思路
有鉴于此，本专利技术的目的在于克服现有技术的不足，提供一种音视频综合处理系统及方法，以软件方法实现音视频的采集、编辑、编码、录像和网上直播功能。为实现以上目的，本专利技术采用如下技术方案：一种音视频综合处理系统，包括：视频监视模块，用于监视采集到的多路视频信号；音频监听模块，用于监听采集到的多路音频信号；视频编辑模块，用于对所监视的多路视频信号进行实时编辑，以形成目标画面；视频编码模块，用于对编辑后的目标画面进行实时H264视频编码，以供后续录像或者直播使用；音频编码模块，用于对所监听的音频信号分别进行AAC高保真编码和低码流G711编码；第一音视频同步模块，用于同步H264视频编码信号和AAC高保真编码后的音频信号，得到同步后的录像音视频流；第二音视频同步模块，用于同步H264视频编码信号和低码流G711编码后的音频信号，得到同步后的直播音视频流；录像模块，用于将同步后的录像音视频流实时写入到PM4文件；直播模块，用于采用预设协议将同步后的直播音视频流在预设范围内进行实时网上直播。优选地，所述多路视频信号通过网络数字摄像机进行采集。优选地，所述多路音频信号通过话筒和带声卡的电脑采集，或者通过话筒和网络数字摄像机采集。优选地，所述视频编辑模块基于汇编语言实现。优选地，所述视频编码模块基于FFMPEG编码库来实现的。优选地，所述视频编码模块上设有多个控制接口，包括：码流控制接口、质量控制接口、延时控制接口和分辨率控制接口。优选地，所述视频编码模块的入口为I420数据流格式，出口数据为H264数据流格式。优选地，所述第一音视频同步模块，以AAC高保真编码后的音频信号为基准，同时采用固定帧率算法、时基同步算法对H264视频编码信号进行插帧、丢帧，确保音视频同步，得到同步后的录像音视频流。优选地，所述第二音视频同步模块，以低码流G711编码后的音频信号为基准，同时采用固定帧率算法、时基同步算法对H264视频编码信号进行插帧、丢帧，确保音视频同步，得到同步后的直播音视频流。一种音视频综合处理方法，应用于上述的音视频综合处理系统中，包括：步骤S1、监视采集到的视频信号，同时监听采集到的音频信号；步骤S2、对所监视的多路视频信号进行实时编辑，以形成目标画面；步骤S3、对编辑后的目标画面进行实时H264视频编码，以供后续录像或者直播使用；步骤S4、对所监听的音频信号分别进行AAC高保真编码和低码流G711编码；步骤S5、同步H264视频编码信号和AAC高保真编码后的音频信号，得到同步后的录像音视频流；步骤S6、同步H264视频编码信号和低码流G711编码后的音频信号，得到同步后的直播音视频流；步骤S7、将同步后的录像音视频流实时写入到PM4文件；步骤S8、采用预设协议将同步后的直播音视频流在预设范围内进行实时网上直播。本专利技术采用以上技术方案，至少具备以下有益效果：可以理解的是，本专利技术提供的这种音视频综合处理系统及方法，视频监视模块、音频监听模块、视频编辑模块、视频编码模块、音频编码模块、第一音视频同步模块和第二音视频同步模块皆由软件编码实现，相比现有技术中，通过硬件实现音视频录像和直播的技术方案，本专利技术提供的技术方案，成本低、部署方便，应用范围更广，且后期维护升级成本低、操作简单。另外，本专利技术提供的这种音视频综合处理系统及方法，由于集成了录像和直播功能，所以可以同时进行录像转播和直播，无需分别安装不同的软件系统，功能集成度更高，客户体验度高。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术一实施例提供的一种音视频综合处理系统的示意框图；图2为本专利技术一实施例提供的一种音视频综合处理方法的流程示意图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面将对本专利技术的技术方案进行详细的描述。显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施方式，都属于本专利技术所保护的范围。下面通过附图和实施例，对本专利技术的技术方案做进一步的详细描述。参见图1，本专利技术一实施例提供的一种音视频综合处理系统，包括：视频监视模块1，用于监视采集到的多路视频信号；音频监听模块2，用于监听采集到的多路音频信号；视频编辑模块3，用于对所监视的多路视频信号进行实时编辑，以形成目标画面；视频编码模块4，用于对编辑后的目标画面进行实时H264视频编码，以供后续录像或者直播使用；音频编码模块5，用于对所监听的音频信号分别进行AAC高保真编码和低码流G711编码；第一音视频同步模块6，用于同步H264视频编码信号和AAC高保真编码后的音频信号，得到同步后的录像音视频流；第二音视频同步模块7，用于同步H264视频编码信号和低码流G711编码后的音频信号，得到同步后的直播音视频流；录像模块8，用于将同步后的录像音视频流实时写入到PM4文件；直播模块9，用于采用预设协议将同步后的直播音视频流在预设范围内进行实时网上直播。需要说明的是：1、视频监视模块，此模块相当于四路硬件编辑机的监视部分，比硬件本文档来自技高网...

【技术保护点】
一种音视频综合处理系统，其特征在于，包括：视频监视模块，用于监视采集到的多路视频信号；音频监听模块，用于监听采集到的多路音频信号；视频编辑模块，用于对所监视的多路视频信号进行实时编辑，以形成目标画面；视频编码模块，用于对编辑后的目标画面进行实时H264视频编码，以供后续录像或者直播使用；音频编码模块，用于对所监听的音频信号分别进行AAC高保真编码和低码流G711编码；第一音视频同步模块，用于同步H264视频编码信号和AAC高保真编码后的音频信号，得到同步后的录像音视频流；第二音视频同步模块，用于同步H264视频编码信号和低码流G711编码后的音频信号，得到同步后的直播音视频流；录像模块，用于将同步后的录像音视频流实时写入到PM4文件；直播模块，用于采用预设协议将同步后的直播音视频流在预设范围内进行实时网上直播。

【技术特征摘要】
1.一种音视频综合处理系统，其特征在于，包括：视频监视模块，用于监视采集到的多路视频信号；音频监听模块，用于监听采集到的多路音频信号；视频编辑模块，用于对所监视的多路视频信号进行实时编辑，以形成目标画面；视频编码模块，用于对编辑后的目标画面进行实时H264视频编码，以供后续录像或者直播使用；音频编码模块，用于对所监听的音频信号分别进行AAC高保真编码和低码流G711编码；第一音视频同步模块，用于同步H264视频编码信号和AAC高保真编码后的音频信号，得到同步后的录像音视频流；第二音视频同步模块，用于同步H264视频编码信号和低码流G711编码后的音频信号，得到同步后的直播音视频流；录像模块，用于将同步后的录像音视频流实时写入到PM4文件；直播模块，用于采用预设协议将同步后的直播音视频流在预设范围内进行实时网上直播。2.根据权利要求1所述的音视频综合处理系统，其特征在于，所述多路视频信号通过网络数字摄像机进行采集。3.根据权利要求2所述的音视频综合处理系统，其特征在于，所述多路音频信号通过话筒和带声卡的电脑采集，或者通过话筒和网络数字摄像机采集。4.根据权利要求1所述的音视频综合处理系统，其特征在于，所述视频编辑模块基于汇编语言实现。5.根据权利要求1所述的音视频综合处理系统，其特征在于，所述视频编码模块基于FFMPEG编码库来实现的。6.根据权利要求5所述的音视频综合处理系统，其特征在于，所述视频编码模块上设有多个控制接口，包括：码流控制接口、质量控制接口、延时控制接口和分辨...

【专利技术属性】
技术研发人员：王建民，
申请(专利权)人：王建民，
类型：发明
国别省市：江苏,32