【技术实现步骤摘要】
本专利技术涉及视频通信，具体地，涉及多目摄像头拼接融合方法及其系统。
技术介绍
1、多目摄像头拼接融合技术是一种将多个摄像头捕获的图像或视频流组合成一个统一的、视角更宽的全景图像的技术。这种技术在视频监控、虚拟现实、远程医疗、智能交通管理、体育赛事直播等多个领域有着广泛的应用。多目摄像头拼接融合技术的发展，不仅提高了视频监控系统的覆盖范围和效能，还为虚拟现实、增强现实等新兴领域提供了更加丰富和真实的视觉体验。随着图像处理技术和计算能力的不断提高，这项技术的应用范围和效果得到进一步的扩展和提升。
2、在现有的技术中，为了实现全景视频的拼接融合，常用的方法有基于硬件的全景拼接算法（如any view stitching，简称avs）和基于软件的方案（如opencv stitch）。这些方法通常在视频设备内部进行，利用多目摄像头捕获的视频流，通过内置的处理器或者外部的服务器进行处理。
3、其中，硬件方案如avs算法，通常集成在专用的视频处理芯片中，可以在摄像头设备内部完成图像的预处理、特征点检测、图像变换和拼接融合等操作。这种方案的优势在于能够实现实时的视频拼接，但受限于硬件的性能和成本，往往难以支持高分辨率和复杂场景的全景视频输出。
4、软件方案如opencv stitch，则是利用通用计算平台上的软件库进行处理。这种方案具有较高的灵活性和可扩展性，可以通过升级软件来优化算法和处理流程。然而，opencvstitch中的stitch类主要用于静态图像的全景拼接，而不是直接用于视频帧的实时拼接。因此
5、无论是硬件方案还是软件方案，现有的全景拼接融合技术在实现上都存在一定的局限性。首先，这些方案对摄像头的个数和融合的分辨率有较高的要求。随着摄像头数量的增加和分辨率的大幅提升，处理的数据量呈指数级增长，对处理器的计算能力和内存带宽提出了更高的要求。其次，现有的技术对视频处理芯片的选型和性能要求较高。高性能的芯片能够提供更快的图像处理速度和更高的视频输出质量，但相应的成本也会大幅增加。在有限的预算和芯片性能下，往往需要在实时性、分辨率和成本之间做出权衡。
技术实现思路
1、本专利技术提供了一种多目摄像头拼接融合方法及其系统，通过提前计算拼接角点位置完成对视频画面拼接，减少了对视频芯片性能的要求，并通过拼接融合算法对视频画面的拼接缝进行融合，提高了用户在视频会议中的沉浸式体验。
2、第一方面，本专利技术提供了一种多目摄像头拼接融合方法，其特征在于，所述方法包括：
3、将多目摄像头采集到的视频画面进行矫正；
4、将矫正后的视频画面拼接成视角更宽的全景画面；
5、将相邻的两个视频画面之间的拼接缝进行融合；
6、将处理后的全景画面进行输出。
7、第二方面，本专利技术还提供了一种多目摄像头拼接系统，其特征在于，所述系统包括矫正模块、拼接模块、融合模块以及输出模块，其中：
8、所述矫正模块，用于将多目摄像头采集到的视频画面进行矫正；
9、所述拼接模块，用于将矫正后的视频画面拼接成视角更宽的全景画面；
10、所述融合模块，用于将相邻的两个视频画面之间的拼接缝进行融合；
11、所述输出模块，用于将处理后的全景画面进行输出。
12、本专利技术提供的多目摄像头拼接融合方法及其系统的优点在于：第一，根据提前计算的拼接角点完成对多个视频画面的拼接，省略了全景画面拼接过程中提取局部不变关键点并进行检测的步骤，减轻了视频芯片计算的负担；第二，对视频芯片的性能要求较低，可以在有限的视频芯片性能下实现高帧率和分辨率的视频输出，在降低全景视频画面拼接的成本的前提下，还可以保证用户的观看体验；第三，拼接缝融合阶段对拼接后的全景画面进行边缘融合处理，进一步降低摄像头间拼接缝的色差，弱化拼接缝的存在感，提高用户的沉浸式会议观看体验；第四，本专利技术针对参会者的不同姿势制定不同的标定点用于对视频画面的矫正，可以使得矫正效果更精准。
本文档来自技高网...【技术保护点】
1.一种多目摄像头拼接融合方法，其特征在于，所述方法包括：
2.根据权利要求1所述的多目摄像头拼接融合方法，其特征在于，所述将多目摄像头采集到的视频画面进行矫正的步骤具体包括：
3.根据权利要求2所述的多目摄像头拼接融合方法，其特征在于，所述对每个摄像头进行单独标定，确定每个摄像头采集到的视频画面的四个拼接角点的位置的步骤具体包括：
4.根据权利要求2所述的多目摄像头拼接融合方法，其特征在于，所述根据参会人员的信息确定标定点的位置的步骤具体包括：
5.根据权利要求1-3中的任意一项所述的多目摄像头拼接融合方法，其特征在于，所述将矫正后的视频画面拼接成视角更宽的全景画面的步骤具体包括：
6.一种多目摄像头拼接系统，其特征在于，所述系统包括矫正模块、拼接模块、融合模块以及输出模块，其中：
7.根据权利要求6所述的多目摄像头拼接系统，其特征在于，所述矫正模块具体包括：
8.根据权利要求7所述的多目摄像头拼接系统，其特征在于，所述确定拼接角点模块具体包括：
9.根据权利要求7所述的多目摄像头拼
10.根据权利要求6-9中的任意一项所述的多目摄像头拼接系统，其特征在于，所述拼接模块具体包括：
...【技术特征摘要】
1.一种多目摄像头拼接融合方法，其特征在于，所述方法包括：
2.根据权利要求1所述的多目摄像头拼接融合方法，其特征在于，所述将多目摄像头采集到的视频画面进行矫正的步骤具体包括：
3.根据权利要求2所述的多目摄像头拼接融合方法，其特征在于，所述对每个摄像头进行单独标定，确定每个摄像头采集到的视频画面的四个拼接角点的位置的步骤具体包括：
4.根据权利要求2所述的多目摄像头拼接融合方法，其特征在于，所述根据参会人员的信息确定标定点的位置的步骤具体包括：
5.根据权利要求1-3中的任意一项所述的多目摄像头拼接融合方法，其特征在于，...
【专利技术属性】
技术研发人员：李少玲，胡芳，黄惠林，赵兴国，
申请(专利权)人：上海赛连信息科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。