对网络视频流图像拼接的方法和装置制造方法及图纸

本发明专利技术提供一种对网络视频流图像拼接的方法和装置，该方法包括：获取至少两路网络视频流信息，并基于网络视频流信息创建帧数据的各缓冲队列；其中，各缓冲队列内存储至少一帧图像；对至少两路网络视频流信息内的帧数据进行并行解码；获取解码后的帧图像时间戳；根据帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；若同步，则将同步对应的网络视频流信息进行图像拼接。本发明专利技术通过对获取的网络视频流信息进行解码以及将获取的时间戳与时间戳权重系数进行比较，进而确定网络视频流之间是否存在同步情况，进而将同步网络视频流信息进行图像的拼接，这样使得拼接形成的图像较为完整，减少了产生错位和重影的概率。

Method and device of image mosaic for network video stream

【技术实现步骤摘要】
对网络视频流图像拼接的方法和装置
本专利技术涉及计算机
，尤其涉及一种对网络视频流图像拼接的方法和装置。
技术介绍
多路网络视频流图像拼接是解决单路视频流视角不足以覆盖全景的一种方法，在一些机场、广场、公园等需要全景视角的场景有着广泛的需求。在实际的场景中，多路网络视频流在传输的过程中，可能由于多种多样的原因，使得视频流解码后的帧图像，在时间轴的位置上并不一致，如果不加以判别，最终拼接形成的图像可能产生错位或重影，甚至有可能造成拼接失败等问题。
技术实现思路
为了解决现有技术中视频流解码后的帧图像，在时间轴的位置上不一致，导致拼接形成的图像产生错位或重影的问题，本专利技术提供一种对网络视频流图像拼接的方法和装置。第一方面，本专利技术提供一种对网络视频流图像拼接的方法，该方法包括：获取至少两路网络视频流信息，并基于网络视频流信息创建帧数据的各缓冲队列；其中，各缓冲队列内存储至少一帧图像；对至少两路网络视频流信息内的帧数据进行并行解码；获取解码后的帧图像时间戳；根据帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；若同步，则将同步对应的网络视频流信息进行图像拼接。进一步地，对至少两路网络视频流信息内的帧数据进行并行解码之后还包括：将解码后的帧图像加入各缓冲队列；比较缓冲队列内存储帧数据的最大值与加入解码后的帧图像的各缓冲队列的帧数据数值，确定是否丢弃当前帧图像。进一步地，根据帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步包括：获取每次并行拉取各缓冲队列中的帧图像个数之和；当帧图像个数之和等于各缓冲队列数量时，则对当前缓冲队列中的帧数据进行解码，进而获得多个帧图像时间戳；获取多个帧图像时间戳与时间戳权重系数乘积的整数部分；将存在整数部分数值相同的网络视频流信息确定为同步图像，完成图像拼接。进一步地，该方法还包括：获取预设的每秒处理的帧数；根据预设的每秒处理的帧数，确定时间戳权重系数。第二方面，本专利技术提供一种对网络视频流图像拼接的装置，该装置包括：创建各缓冲队列模块，用于获取至少两路网络视频流信息，并基于网络视频流信息创建帧数据的各缓冲队列；其中，各缓冲队列内存储至少一帧图像；并行解码模块，用于对至少两路网络视频流信息内的帧数据进行并行解码；帧图像时间戳获取模块，用于获取解码后的帧图像时间戳；确定是否同步模块，用于根据帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；图像拼接模块，用于若同步，则将同步对应的网络视频流信息进行图像拼接。进一步地，并行解码模块之后还包括：加入缓冲队列模块，用于将解码后的帧图像加入各缓冲队列；比较模块，用于比较缓冲队列内存储帧数据的最大值与加入解码后的帧图像的各缓冲队列的帧数据数值，确定是否丢弃当前帧图像。进一步地，确定是否同步模块包括：获取拉取帧图像个数之和单元，用于获取每次并行拉取各缓冲队列中的帧图像个数之和；获得多个帧图像时间戳单元，用于当帧图像个数之和等于各缓冲队列数量时，则对当前缓冲队列中的帧数据进行解码，进而获得多个帧图像时间戳；乘积单元，用于获取多个帧图像时间戳与时间戳权重系数乘积的整数部分；拼接单元，用于将存在整数部分数值相同的网络视频流信息确定为同步图像，完成图像拼接。进一步地，该装置还包括：获取处理帧数模块，用于获取预设的每秒处理的帧数；时间戳权重系数确定单元，用于根据预设的每秒处理的帧数，确定时间戳权重系数。第三方面，本专利技术提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现第一方面提供的对网络视频流图像拼接的方法的步骤。第四方面，本专利技术提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现第一方面提供的对网络视频流图像拼接的方法的步骤。本专利技术提供的对网络视频流图像拼接的方法和装置，通过对获取的网络视频流信息进行解码以及将获取的时间戳与时间戳权重系数进行比较，进而确定网络视频流之间是否存在同步情况，进而将同步网络视频流信息进行图像的拼接，这样使得拼接形成的图像较为完整，减少了产生错位和重影的概率。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的对网络视频流图像拼接的方法流程示意图；图2为本专利技术实施例提供的对网络视频流图像拼接的整体流程示意图；图3为本专利技术实施例提供的对网络视频流图像拼接的装置框图；图4为本专利技术实施例提供的电子设备框图。具体实施方式为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。为了解决现有技术中视频流解码后的帧图像，在时间轴的位置上不一致，导致拼接形成的图像产生错位或重影的问题，本专利技术提供一种对网络视频流图像拼接的方法，如图1所示，该方法包括：步骤S101，获取至少两路网络视频流信息，并基于网络视频流信息创建帧数据的各缓冲队列；其中，各缓冲队列内存储至少一帧图像；步骤S102，对至少两路网络视频流信息内的帧数据进行并行解码；步骤S103，获取解码后的帧图像时间戳；步骤S104，根据帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；步骤S105，若同步，则将同步对应的网络视频流信息进行图像拼接。具体为，服务器获取N路网络视频流，其中N设定值大于等于2，为每路网络视频流创建一个缓冲队列，缓冲队列支持“先本文档来自技高网...

【技术保护点】
1.一种对网络视频流图像拼接的方法，其特征在于，所述方法包括：/n获取至少两路网络视频流信息，并基于所述网络视频流信息创建帧数据的各缓冲队列；其中，所述各缓冲队列内存储至少一帧图像；/n对所述至少两路网络视频流信息内的帧数据进行并行解码；/n获取解码后的帧图像时间戳；/n根据所述帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；/n若同步，则将同步对应的网络视频流信息进行图像拼接。/n

【技术特征摘要】
1.一种对网络视频流图像拼接的方法，其特征在于，所述方法包括：
获取至少两路网络视频流信息，并基于所述网络视频流信息创建帧数据的各缓冲队列；其中，所述各缓冲队列内存储至少一帧图像；
对所述至少两路网络视频流信息内的帧数据进行并行解码；
获取解码后的帧图像时间戳；
根据所述帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步；
若同步，则将同步对应的网络视频流信息进行图像拼接。


2.根据权利要求1所述的方法，其特征在于，所述对所述至少两路网络视频流信息内的帧数据进行并行解码之后还包括：
将解码后的帧图像加入各缓冲队列；
比较缓冲队列内存储帧数据的最大值与加入解码后的帧图像的各缓冲队列的帧数据数值，确定是否丢弃当前帧图像。


3.根据权利要求1所述的方法，其特征在于，所述根据所述帧图像时间戳与时间戳权重系数，确定各路网络视频流信息之间是否存在同步包括：
获取每次并行拉取各缓冲队列中的帧图像个数之和；
当帧图像个数之和等于各缓冲队列数量时，则对当前缓冲队列中的帧数据进行解码，进而获得多个帧图像时间戳；
获取所述多个帧图像时间戳与时间戳权重系数乘积的整数部分；
将存在整数部分数值相同的网络视频流信息确定为同步图像，完成图像拼接。


4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
获取预设的每秒处理的帧数；
根据所述预设的每秒处理的帧数，确定时间戳权重系数。


5.一种对网络视频流图像拼接的装置，其特征在于，所述装置包括：
创建各缓冲队列模块，用于获取至少两路网络视频流信息，并基于所述网络视频流信息创建帧数据的各缓冲队列；其中，所述各缓冲队列内存储至少一帧图像；
并行解码模块，用于对所述至少两路网络视频流信息内的帧数据进...

【专利技术属性】
技术研发人员：张鹏程，樊治国，黄惠南，陈忠平，
申请(专利权)人：上海高重信息科技有限公司，
类型：发明
国别省市：上海;31