本发明专利技术提供一种移动前景目标遮挡的视频背景还原方法及系统，其中方法包括：获取待处理的视频，并对所述视频进行解码，得到视频帧图片集；其中，所述视频帧图片集中包括所述视频中每一帧的图片，将所述视频中每一帧的图片定义为视频帧图片；通过像素级目标跟踪算法对所述视频帧图片进行处理，直到完成视频帧图片集中的每张视频帧图片的处理，并输出背景图片。本发明专利技术基于像素级目标跟踪算法，在目标移动时候实时还原目标遮挡的像素区域，同时更新未遮挡的背景像素，通过算法处理能够还原一张没有前景目标遮挡的背景图，有利用后续背景目标的检测和分析。标的检测和分析。标的检测和分析。
【技术实现步骤摘要】
一种移动前景目标遮挡的视频背景还原方法及系统
[0001]本专利技术涉及机器视觉
，特别是涉及一种移动前景目标遮挡的视频背景还原方法及系统。
技术介绍
[0002]视频记录着大量的图像信息，通过对视频的分析能够智能的分析各项数据；特别对于快消领域的商品识别来说，拍摄视频，然后对视频中的商品自动的定位和识别可以分析市场各个商品的占有量以及产品分布，有利于商品的铺货和销量分析。而超市往往人流量很多商品可能经常处于遮挡的状态，这使得商品的自动化识别受到阻碍。
[0003]目前常用的背景还原的技术是基于单张图片的，利用image to image深度学习网络进行端到端的训练和还原，但是这种方法往往是基于整体图片特征进行训练和预测的，还原出来的背景并不符合实际情况的背景内容。
技术实现思路
[0004]为解决以上现有技术问题，本专利技术提供一种移动前景目标遮挡的视频背景还原方法及系统，基于像素级目标跟踪算法，在目标移动时候实时还原目标遮挡的像素区域，同时更新未遮挡的背景像素，通过算法处理能够还原一张没有前景目标遮挡的背景图，有利用后续背景目标的检测和分析。
[0005]本专利技术第一方面提供一种移动前景目标遮挡的视频背景还原方法，包括：
[0006]获取待处理的视频，并对所述视频进行解码，得到视频帧图片集；其中，所述视频帧图片集中包括所述视频中每一帧的图片，将所述视频中每一帧的图片定义为视频帧图片；
[0007]通过像素级目标跟踪算法对所述视频帧图片进行处理，直到完成视频帧图片集中的每张视频帧图片的处理，并输出背景图片。
[0008]进一步地，所述通过像素级目标跟踪算法对所述视频帧图片进行处理，包括：
[0009]根据所述视频的场景内容定义至少两个前景目标；
[0010]对所述前景目标进行跟踪，将跟踪结果作为当前的前景区域目标，并根据所有的前景区域目标建立跟踪列表；
[0011]对所述视频帧图片进行所述前景区域目标的检测，若检测出不属于所述跟踪列表中的前景区域目标，则将新检测得到的前景目标作为前景区域目标添加至所述跟踪列表中，以更新所述跟踪列表；
[0012]输出所有的所述前景区域目标作为所述视频帧图片的背景区域；
[0013]将所述视频的第一帧的视频帧图片作为背景图片；
[0014]根据所述背景图片及所述背景区域得到所述背景图片与所述背景区域的交集区域及属于所述背景区域但不属于所述背景区域的区域；
[0015]将所述属于所述背景区域但不属于所述背景区域的区域作为母版图片，并将所述
母版图片通过拉普拉斯金字塔融合方法填入所述背景区域。
[0016]进一步地，所述对所述视频帧图片进行所述前景区域目标的检测，包括：
[0017]计算所述将新检测得到的前景目标和所述属于所述跟踪列表中的前景区域目标的Mask IOU值；
[0018]若所述Mask IOU值大于0.3，则所述新检测得到的前景目标与所述属于所述跟踪列表中的前景区域目标为统一目标；
[0019]若所述Mask IOU值小于0.3，则所述新检测得到的前景目标为不属于所述跟踪列表中的前景区域目标。
[0020]进一步地，所述Mask IOU值通过以下公式计算：
[0021][0022]其中，A为新检测得到的前景目标的像素点，B为属于跟踪列表中的前景区域目标的像素点，A∩B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的相交区域的像素点，A∪B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的总像素点。
[0023]进一步地，所述根据所述视频的场景内容定义至少两个前景目标之后，包括：
[0024]将所述前景目标进行mask标注，并将标注后的前景目标通过mask检测器进行训练。
[0025]本专利技术第二方面提供一种移动前景目标遮挡的视频背景还原系统，包括：
[0026]解码模块，用于获取待处理的视频，并对所述视频进行解码，得到视频帧图片集；其中，所述视频帧图片集中包括所述视频中每一帧的图片，将所述视频中每一帧的图片定义为视频帧图片；
[0027]视频背景还原模块，用于通过像素级目标跟踪算法对所述视频帧图片进行处理，直到完成视频帧图片集中的每张视频帧图片的处理，并输出背景图片。
[0028]进一步地，所述视频背景还原模块，还用于：
[0029]根据所述视频的场景内容定义至少两个前景目标；
[0030]对所述前景目标进行跟踪，将跟踪结果作为当前的前景区域目标，并根据所有的前景区域目标建立跟踪列表；
[0031]对所述视频帧图片进行所述前景区域目标的检测，若检测出不属于所述跟踪列表中的前景区域目标，则将新检测得到的前景目标作为前景区域目标添加至所述跟踪列表中，以更新所述跟踪列表；
[0032]输出所有的所述前景区域目标作为所述视频帧图片的背景区域；
[0033]将所述视频的第一帧的视频帧图片作为背景图片；
[0034]根据所述背景图片及所述背景区域得到所述背景图片与所述背景区域的交集区域及属于所述背景区域但不属于所述背景区域的区域；
[0035]将所述属于所述背景区域但不属于所述背景区域的区域作为母版图片，并将所述母版图片通过拉普拉斯金字塔融合方法填入所述背景区域。
[0036]进一步地，所述视频背景还原模块，还用于：
[0037]计算所述将新检测得到的前景目标和所述属于所述跟踪列表中的前景区域目标的Mask IOU值；
[0038]若所述Mask IOU值大于0.3，则所述新检测得到的前景目标与所述属于所述跟踪列表中的前景区域目标为统一目标；
[0039]若所述Mask IOU值小于0.3，则所述新检测得到的前景目标为不属于所述跟踪列表中的前景区域目标。
[0040]进一步地，所述Mask IOU值通过以下公式计算：
[0041][0042]其中，A为新检测得到的前景目标的像素点，B为属于跟踪列表中的前景区域目标的像素点，A∩B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的相交区域的像素点，A∪B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的总像素点。
[0043]进一步地，所述视频背景还原模块，还用于：
[0044]将所述前景目标进行mask标注，并将标注后的前景目标通过mask检测器进行训练。
[0045]与现有技术相比，本专利技术实施例的有益效果在于：
[0046]本专利技术提供一种移动前景目标遮挡的视频背景还原方法及系统，其中方法包括：获取待处理的视频，并对所述视频进行解码，得到视频帧图片集；其中，所述视频帧图片集中包括所述视频中每一帧的图片，将所述视频中每一帧的图片定义为视频帧图片；通过像素级目标跟踪算法对所述视频帧图片进行处理，直到完成视频帧图片集中的每张视频帧图片的处理，并输出背景图片。本专利技术基于像素级目标跟踪算法，在目标移动时候实时还原目标遮挡本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种移动前景目标遮挡的视频背景还原方法，其特征在于，包括：获取待处理的视频，并对所述视频进行解码，得到视频帧图片集；其中，所述视频帧图片集中包括所述视频中每一帧的图片，将所述视频中每一帧的图片定义为视频帧图片；通过像素级目标跟踪算法对所述视频帧图片进行处理，直到完成视频帧图片集中的每张视频帧图片的处理，并输出背景图片。2.如权利要求1所述的一种移动前景目标遮挡的视频背景还原方法，其特征在于，所述通过像素级目标跟踪算法对所述视频帧图片进行处理，包括：根据所述视频的场景内容定义至少两个前景目标；对所述前景目标进行跟踪，将跟踪结果作为当前的前景区域目标，并根据所有的前景区域目标建立跟踪列表；对所述视频帧图片进行所述前景区域目标的检测，若检测出不属于所述跟踪列表中的前景区域目标，则将新检测得到的前景目标作为前景区域目标添加至所述跟踪列表中，以更新所述跟踪列表；输出所有的所述前景区域目标作为所述视频帧图片的背景区域；将所述视频的第一帧的视频帧图片作为背景图片；根据所述背景图片及所述背景区域得到所述背景图片与所述背景区域的交集区域及属于所述背景区域但不属于所述背景区域的区域；将所述属于所述背景区域但不属于所述背景区域的区域作为母版图片，并将所述母版图片通过拉普拉斯金字塔融合方法填入所述背景区域。3.如权利要求2所述的一种移动前景目标遮挡的视频背景还原方法，其特征在于，所述对所述视频帧图片进行所述前景区域目标的检测，包括：计算所述将新检测得到的前景目标和所述属于所述跟踪列表中的前景区域目标的Mask IOU值；若所述Mask IOU值大于0.3，则所述新检测得到的前景目标与所述属于所述跟踪列表中的前景区域目标为统一目标；若所述Mask IOU值小于0.3，则所述新检测得到的前景目标为不属于所述跟踪列表中的前景区域目标。4.如权利要求3所述的一种移动前景目标遮挡的视频背景还原方法，其特征在于，所述Mask IOU值通过以下公式计算：其中，A为新检测得到的前景目标的像素点，B为属于跟踪列表中的前景区域目标的像素点，A∩B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的相交区域的像素点，A∪B为新检测得到的前景目标与属于跟踪列表中的前景区域目标的总像素点。5.如权利要求2所述的一种移动前景目标遮挡的视频背景还原方法，其特征在于，所述根据所述视频的场景内容定义至少两个前景目标之后，包括：将所述前景目标进行mask标注，并将标注后的前景目标通过mask检测器进...
【专利技术属性】
技术研发人员：周斌，丁明，
申请(专利权)人：广州市玄武无线科技股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。