本发明专利技术涉及智能看护技术领域，解决了现有技术中无法通过视频剪辑的方式记录母婴喂食过程中的美好时光以及视频数据存储空间占用大的问题，提供了一种基于母婴喂食行为识别的视频智能剪辑方法、装置及设备。该方法包括：获取婴幼儿看护场景下的实时视频流，将所述实时视频流压缩为第一分辨率的子码流视频和第二分辨率的主码流视频；将所述子码流视频分解为多帧第一图像，依据预设规则对所述第一图像进行处理，获取存在母婴喂食行为的第二图像；获取主码流视频中与第二图像的帧号对应的第三图像，将所述第三图像与前后预设帧图像合成，剪辑出目标视频集锦。本发明专利技术在通过智能化视频剪辑记录母婴喂食过程中美好时光的同时，又缩小了存储空间。小了存储空间。小了存储空间。
【技术实现步骤摘要】
基于母婴喂食行为识别的视频智能剪辑方法、装置及设备
[0001]本专利技术涉及智能看护
，尤其涉及一种基于母婴喂食行为识别的视频智能剪辑方法、装置及设备。
技术介绍
[0002]随着计算机和网络技术的发展，电子设备的功能越来越多样化。通过视频剪辑手段将感兴趣的视频片段拼接成新的视频越来越受用户喜爱。在涉及到婴幼儿智能看护领域，针对婴幼儿的精彩视频剪辑是指将婴幼儿的成长瞬间通过剪辑、特效、背景音乐等手段，制作成一段有趣、生动、具有感染力的视频。由于婴幼儿年龄较小，不具备自主进食的能力，母亲给婴幼儿喂食的情况较为普遍，用户经常想要通过视频剪辑的方式来记录母婴喂食过程中的美好时光，然而，由于原始视频素材的采集、镜头的分割与合并、后期合成等处理，都需要消耗大量的人力与精力，用户需要预先在电子设备中安装视频剪辑工具，并具备基础的视频剪辑能力，当用户的视频剪辑能力较低时，难以基于原始视频素材剪辑创作出一个优质的母婴喂食视频集锦。
[0003]现有中国专利CN115812224A公开了一种用于在瓶子喂食期间提供帮助的系统和方法，所述方法包括：识别所述视频图像内的婴儿；确定所述婴儿的定向；识别所述视频图像内的瓶子；确定所述瓶子的定向；确定所述瓶子和/或婴儿为了达到期望的瓶子定向所需的重新定向；以及控制所述显示设备以输出叠加在所述视频图像之上的重新定向指令，以帮助所述受试者重新定向所述瓶子和/或所述婴儿，以实现期望的瓶子和/或婴儿定向。该图像处理器执行图像分析以在婴儿的瓶子喂食期间向受试者(例如婴儿的母亲或其他看护者)提供实时帮助。上述专利虽然识别出了母婴喂食行为并进行帮助，然而，在母婴喂食过程中，视频数据量通常较大，因为监测需要捕捉高分辨率的图像，而这些数据需要大量的存储和传输带宽，由于视频的帧率通常很高，会进一步增加数据量，在实际视频剪辑中，大数据量可能导致存储和传输的成本变得很高。
[0004]为此，如何在通过智能化视频剪辑记录母婴喂食过程中美好时光的同时，又减少存储空间是亟待解决的问题。
技术实现思路
[0005]有鉴于此，本专利技术提供了一种基于母婴喂食行为识别的视频智能剪辑方法、装置及设备，用以解决现有技术中无法通过视频剪辑的方式记录母婴喂食过程中的美好时光且视频数据存储空间占用大的问题。
[0006]本专利技术采用的技术方案是：
[0007]第一方面，本专利技术提供了一种基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述方法包括：
[0008]S1：获取婴幼儿看护场景下的实时视频流，将所述实时视频流压缩为第一分辨率的子码流视频和第二分辨率的主码流视频；
[0009]S2：将所述子码流视频分解为多帧第一图像，依据预设规则对所述第一图像进行处理，获取存在母婴喂食行为的第二图像；
[0010]S3：获取主码流视频中与第二图像位置对应的第三图像，将所述第三图像与前后预设帧图像合成，剪辑出目标视频集锦。
[0011]优选地，所述S2包括：
[0012]S21：对各所述第一图像进行前景检测，将前景检测后的图像输入婴幼儿检测模型中，获取婴幼儿就餐图像；
[0013]S22：对所述婴幼儿就餐图像进行肤色纹理分析，将分析后的图像输入预训练的手部分类模型，获取包含母亲手部的目标图像；
[0014]S23：当目标图像中母亲手部向婴幼儿靠近时，将所述目标图像作为所述第二图像输出。
[0015]优选地，所述S21包括：
[0016]S211：依据帧差法，对各所述第一图像进行处理，得出前景运动区域位置信息；
[0017]S212：依据所述前景运动区域位置信息，当判断前景运动区域为预设的目标区域时，将所述第一图像输入所述婴幼儿检测模型中进行检测；
[0018]S213：当通过所述婴幼儿检测模型检测到婴幼儿坐在餐椅上时，获得所述婴幼儿就餐图像。
[0019]优选地，所述S212包括：
[0020]S2121：将所述第一图像输入预训练的餐椅检测模型中，输出餐椅位置信息；
[0021]S2122：依据所述前景运动区域位置信息，获取前景运动区域中的前景点坐标信息；
[0022]S2123：计算所有前景点的均值坐标信息，依据所述餐椅位置信息和均值坐标信息，得出前景运动区域和餐椅之间的第一相对位置信息；
[0023]S2124：依据所述第一相对位置信息，当判断前景运动区域中心在餐椅中心正上方时，将所述第一图像输入所述婴幼儿检测模型中进行检测。
[0024]优选地，所述S22包括：
[0025]S221：将所述婴幼儿就餐图像输入预训练的手部检测模型中，输出手部图像；
[0026]S222：将所述手部图像输入预训练的肤色纹理检测模型中，获取肤色纹理特征信息；
[0027]S223：将提取出所述肤色纹理特征信息后的手部图像输入所述手部分类模型中，输出所述目标图像。
[0028]6.根据权利要求2所述的基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述S23包括：
[0029]S231：将所述目标图像输入预训练的目标检测模型中，获得婴幼儿位置信息和母亲手部位置信息；
[0030]S232：依据所述婴幼儿位置信息和母亲手部位置信息，得出母亲手部和婴幼儿之间的第二相对位置信息；
[0031]S233：依据连续多帧所述目标图像对应的所述第二相对位置信息，当检测到目标图像中母亲手部向婴幼儿靠近时，输出所述第二图像。
[0032]优选地，所述S3包括：
[0033]S31：获取所述第二图像上的帧号；
[0034]S32：将主码流视频中的图像按照所述第二图像上的帧号进行顺序编码，输出所述第三图像；
[0035]S33：将所述第三图像与前后预设帧图像合成，剪辑出存在母婴喂食行为的所述目标视频集锦。
[0036]第二方面，本专利技术提供了一种基于母婴喂食行为识别的视频智能剪辑装置，其特征在于，所述装置包括：
[0037]视频压缩模块，用于获取婴幼儿看护场景下的实时视频流，将所述实时视频流压缩为第一分辨率的子码流视频和第二分辨率的主码流视频；
[0038]母婴喂食行为识别模块，用于将所述子码流视频分解为多帧第一图像，依据预设规则对所述第一图像进行处理，获取存在母婴喂食行为的第二图像；
[0039]视频合成模块，用于获取主码流视频中与第二图像的位置对应的第三图像，将所述第三图像与前后预设帧图像合成，剪辑出目标视频集锦。
[0040]第三方面，本专利技术实施例还提供了一种电子设备，包括：至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令，当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
[0041]第四方面，本专利技术实施例还提供了一种存储介质，其上存储有计算机程序指令，当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
[0042]综上所述，本专利技术的有益效果如下本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述方法包括：S1：获取婴幼儿看护场景下的实时视频流，将所述实时视频流压缩为第一分辨率的子码流视频和第二分辨率的主码流视频；S2：将所述子码流视频分解为多帧第一图像，依据预设规则对所述第一图像进行处理，获取存在母婴喂食行为的第二图像；S3：获取主码流视频中与第二图像位置对应的第三图像，将所述第三图像与前后预设帧图像合成，剪辑出目标视频集锦。2.根据权利要求1所述的基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述S2包括：S21：对各所述第一图像进行前景检测，将前景检测后的图像输入婴幼儿检测模型中，获取婴幼儿就餐图像；S22：对所述婴幼儿就餐图像进行肤色纹理分析，将分析后的图像输入预训练的手部分类模型，获取包含母亲手部的目标图像；S23：当目标图像中母亲手部向婴幼儿靠近时，将所述目标图像作为所述第二图像输出。3.根据权利要求2所述的基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述S21包括：S211：依据帧差法，对各所述第一图像进行处理，得出前景运动区域位置信息；S212：依据所述前景运动区域位置信息，当判断前景运动区域为预设的目标区域时，将所述第一图像输入所述婴幼儿检测模型中进行检测；S213：当通过所述婴幼儿检测模型检测到婴幼儿坐在餐椅上时，获得所述婴幼儿就餐图像。4.根据权利要求3所述的基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述S212包括：S2121：将所述第一图像输入预训练的餐椅检测模型中，输出餐椅位置信息；S2122：依据所述前景运动区域位置信息，获取前景运动区域中的前景点坐标信息；S2123：计算所有前景点的均值坐标信息，依据所述餐椅位置信息和均值坐标信息，得出前景运动区域和餐椅之间的第一相对位置信息；S2124：依据所述第一相对位置信息，当判断前景运动区域中心在餐椅中心正上方时，将所述第一图像输入所述婴幼儿检测模型中进行检测。5.根据权利要求2所述的基于母婴喂食行为识别的视频智能剪辑方法，其特征在于，所述S22包括：S221：将所述婴...
【专利技术属性】
技术研发人员：陈辉，熊章，张智，雷奇文，艾伟，
申请(专利权)人：武汉星巡智能科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。