一种双码率压缩摄像装置及其上位机解码装置制造方法及图纸

本发明专利技术提出一种双码率压缩摄像装置及其上位机解码装置，工作稳定，在不提高传输带宽的前提下，能够采集到高清图片信息，极大提高了飞行器上载荷对关键目标的观测效果。该双码率压缩摄像装置采用FPGA加ARM的串行结构；其中图像管道接口模块IPIPEIF将接收到的高清视频分成两路，一路送入图像大小调节模块RZA将视频尺寸调整至标清格式，再将标清视频送入压缩核进行视频数据H.264压缩；另一路送入图像信号接口模块ISIF，并最终送入压缩核进行图片数据JPEG压缩；JPEG压缩后的图片数据分成多个数据块，相邻两帧视频数据之间嵌入一个数据块；通过SPI接口将包含有图片数据和视频数据的串行数据发送至FPGA。

A dual rate compression camera device and its host computer decoding device

The invention proposes a dual rate compression camera device and its host computer decoding device, which is stable in operation, and can collect high-definition picture information without increasing the transmission bandwidth, thus greatly improving the observation effect of the payload on the key target of the aircraft. Serial structure imaging device with the FPGA and ARM of the double bit rate compression; the interface module of image pipeline IPIPEIF will receive the HD video is divided into two parts, the way into the image size adjustment module RZA will be adjusted to the standard definition format video size, then the standard definition video to H.264 video data compression core compression; another way to the image signal of ISIF interface module, and finally into the image data compression JPEG core compression; JPEG compressed image data into a plurality of data blocks between two adjacent frames of video data into a data block; through the SPI interface will include serial data image data and the video data is sent to FPGA.

【技术实现步骤摘要】
一种双码率压缩摄像装置及其上位机解码装置
：本专利技术属于图像信息
，涉及一种双码率压缩摄像装置及其上位机解码装置，尤其涉及对图像采集压缩传输技术的改进。
技术介绍
：随着我国航空航天事业的不断发展，目前我国在飞行器上有效监控载荷的需求也同时在增加。由于受到传输带宽及压缩算法的限制，我国飞行器上监控摄像装置多采用720x576分辨率，按照不大于500kbps压缩码率对视频数据进行压缩,用以观测关键部位工作状态；由于受到带宽限制，以500kbps码率压缩后传输至地面站再进行解压缩显示的图像效果不佳，很难满足观测要求。因此如何在不提高带宽的情况下如何满足观测要求成为飞行器监控摄像装置着重解决的问题。通过查询其他领域的相关文献资料，专利文献CN102387348A“应用于智能交通的双码流高清相机”公开了一种双码流压缩装置，该装置采用ARM加DSP的并行处理结构，提出将高清视频和高清图片同时压缩。但该方案压缩后数据量较大，无法满足航空航天领域内的带宽较小要求，同时该方案无法对压缩视频和图片的压缩码率、分辨率进行调整，灵活性不够，无法满足实际工程需要。而且，虽然并行处理速度快，但是结构不够稳定，容易出现数据采集压缩过程中的丢失，导致误码出现。
技术实现思路
：本专利技术提出一种双码率压缩摄像装置及其上位机解码装置，工作稳定，在不提高传输带宽的前提下，能够采集到高清图片信息，极大提高了飞行器上载荷对关键目标的观测效果。本专利技术的解决方案如下：该双码率压缩摄像装置包括视频采集模块和视频压缩模块，采用FPGA加ARM的串行结构；所述视频采集模块基于FPGA，采集视频信号并转换为高清视频，送入视频压缩模块；所述视频压缩模块包括图像管道接口模块IPIPEIF、图像大小调节模块RZA和图像信号接口模块ISIF；图像管道接口模块IPIPEIF将接收到的高清视频分成两路，一路送入图像管道IPIPE的图像大小调节模块RZA将视频尺寸调整至标清格式，再将标清视频送入压缩核进行视频数据H.264压缩；另一路送入图像信号接口模块ISIF，并最终送入压缩核进行图片数据JPEG压缩；JPEG压缩后的图片数据分成多个数据块，相邻两帧视频数据之间嵌入一个所述数据块；通过SPI接口将包含有图片数据和视频数据的串行数据发送至FPGA，FPGA按422接口向后端数据综合器发送数据，并通过天线发送至地面数据接收设备。基于以上方案，本专利技术还进一步作了如下优化：所述串行数据中，压缩后的视频数据和压缩后的图片数据头尾分别添加有标志位。所述视频压缩模块采用TIDM368型号产品。所述FPGA通过GPIO接口与视频压缩模块进行通信。所述视频采集模块是将采集的视频信号格式转换至BT.1120高清视频协议，按照BT.1120高清视频协议将1080P@25HZ视频送入视频压缩模块；所述图像大小调节模块RZA是将视频尺寸调整至720x576，再将720x576@25HZ视频送入压缩核进行视频数据H.264压缩。由所述JPEG压缩后的图片数据拆分出的每个数据块均为1KB大小。对应于上述双码率压缩摄像装置的上位机解码装置，包括数据重组模块和解码模块，数据重组模块接收到压缩的串行数据后，根据标志位信息，将图片数据从视频数据中挑出并重组，解码模块将挑出并重组得到的视频压缩数据和图片压缩数据分别进行解码显示。本专利技术具有以下优点：1)采用FPGA加ARM的串行结构，结构稳定，不会出现数据采集压缩过程中丢失的问题,能够保证系统稳定工作。2)对于输入视频采用标清视频和高清图片的同时压缩，在不提高传输带宽的前提下，能够采集到高清图片信息，极大提升了观测目标的清晰度。3)通过对将压缩图片数据分块，解决带宽不足的问题，保证了数据均匀传输，满足视频传输要求。4)通过DM368采集高清视频，并利用RZA模块可对高清视频进行任意裁剪和缩放；5)FPGA可以通过GPIO接口同DM368进行通信，实时修改视频及图片压缩的分辨率、码率、帧频。6)本专利技术地面站可利用软解码进行实时解码显示。附图说明图1是摄像装置外形结构示意图。图2是本专利技术的整体结构示意图。图3是本专利技术中双码率压缩的工作原理(即图2中DM368的视频采集压缩传输流程)。图4是双码率压缩中视频采集线程的流程图。图5是双码率压缩中视频图片压缩流程图。图6是双码率压缩中压缩数据输出流程图。图7是视频分辨率、码率修改流程图。图8是地面软解码流程图。具体实施方式下面通过实施例并结合附图，详细说明本专利技术的实现方案。如图1所示的双码率压缩摄像装置外形结构，其内部放置两块电路板，包括电源板和视频压缩板。如图2所示，该双码率压缩摄像装置包括CMOS、FPGA以及DM368等器件，用于视频的采集以及双码率压缩，相应的内部功能可分为视频数据接收功能、压缩功能以及传输功能。FPGA(视频采集模块)作为视频采集及与外部接口通信芯片，FPGA将采集到的视频数据转换成BT.1120格式发送至TIDM368；TIDM368(视频压缩模块)作为视频输入、压缩、传输的主芯片，能够满足温度等实验环境要求。该双码率压缩摄像装置对高清1080P视频按比例缩小至720x576进行H.264压缩，同时按1080P(1920x1080)分辨率进行高清图片压缩,压缩算法采用JPEG，图片按每125帧压缩一帧。由于图片采用JPEG压缩，压缩效率不高，数据压缩后的数据量较大，将视频数据和图片数据依次下传会导致带宽突然增大至1Mbps以上，因此本专利技术将图片数据进行拆分成多个小数据块，添加在视频数据每帧压缩数据之后传输，这样能够保证传输带宽均匀而不会突然增大，将压缩后的视频的图片数据通过数据综合器下传至地面设备，并将视频和图片数据区分并分别解码显示，标清视频能够观测目标运动状态，高清图片能够还原更多目标细节，极大提高了观测效果。该双码率压缩摄像装置的工作原理如下：1)FPGA采集CMOS视频，并将视频格式转换至BT.1120高清视频协议；2)DM368按照BT.1120高清视频协议接收1080P@25HZ视频，并将视频送入图像管道接口IPIPEIF模块；3)IPIPEIF模块将接收到的高清视频分成两路，一路送入图像管道IPIPE的RZA(图像大小调节)模块对视频进行尺寸调整至720x576，另一路送入图像信号接口ISIF模块，并最终送入压缩核进行JPEG压缩；4)RZA模块将720x576@25HZ视频送入压缩核进行H.264压缩；5)将JPEG压缩后的图片数据分成多个1KB数据块，将每个数据块嵌入每帧视频压缩数据最后面；6)通过SPI接口将压缩后的图片和视频数据按16MHZ速率发送至FPGA，FPGA按422接口向后端数据综合器发送数据，并通过天线发送至地面数据接收设备；7)地面上位机接收到视频图片压缩数据后，根据标志位信息，将图片数据从视频数据中挑出并重组，同时将挑出的视频和图片压缩数据分别送去解码显示。以下主要对DM368内部各模块工作进行详细说明：如图3所示，双码率压缩包括了视频采集线程、视频图片压缩线程、压缩码流输出线程。视频采集线程包括视频采集单元，视频采集功能从FPGA中接收以BT1120格式传送的1080P@25HZ视频，将接收到视频保存至缓冲区中以备编码线程调用。FPGA本文档来自技高网...

【技术保护点】
一种双码率压缩摄像装置，包括视频采集模块和视频压缩模块，其特征在于：采用FPGA加ARM的串行结构；所述视频采集模块基于FPGA，采集视频信号并转换为高清视频，送入视频压缩模块；所述视频压缩模块包括图像管道接口模块IPIPEIF、图像大小调节模块RZA和图像信号接口模块ISIF；图像管道接口模块IPIPEIF将接收到的高清视频分成两路，一路送入图像管道IPIPE的图像大小调节模块RZA将视频尺寸调整至标清格式，再将标清视频送入压缩核进行视频数据H.264压缩；另一路送入图像信号接口模块ISIF，并最终送入压缩核进行图片数据JPEG压缩；JPEG压缩后的图片数据分成多个数据块，相邻两帧视频数据之间嵌入一个所述数据块；通过SPI接口将包含有图片数据和视频数据的串行数据发送至FPGA，FPGA通过422接口向后端数据综合器发送数据，并通过天线发送至地面数据接收设备。

【技术特征摘要】
1.一种双码率压缩摄像装置，包括视频采集模块和视频压缩模块，其特征在于：采用FPGA加ARM的串行结构；所述视频采集模块基于FPGA，采集视频信号并转换为高清视频，送入视频压缩模块；所述视频压缩模块包括图像管道接口模块IPIPEIF、图像大小调节模块RZA和图像信号接口模块ISIF；图像管道接口模块IPIPEIF将接收到的高清视频分成两路，一路送入图像管道IPIPE的图像大小调节模块RZA将视频尺寸调整至标清格式，再将标清视频送入压缩核进行视频数据H.264压缩；另一路送入图像信号接口模块ISIF，并最终送入压缩核进行图片数据JPEG压缩；JPEG压缩后的图片数据分成多个数据块，相邻两帧视频数据之间嵌入一个所述数据块；通过SPI接口将包含有图片数据和视频数据的串行数据发送至FPGA，FPGA通过422接口向后端数据综合器发送数据，并通过天线发送至地面数据接收设备。2.根据权利要求1所述的双码率压缩摄像装置，其特征在于：所述串行数据中，压缩后的视频数据和压缩后的图片数据头尾分别添加有标志位。3....

【专利技术属性】
技术研发人员：任龙，张海峰，冯佳，张德瑞，宋晓东，杨洪涛，刘庆，张辉，
申请(专利权)人：中国科学院西安光学精密机械研究所，
类型：发明
国别省市：陕西,61