基于自适应阈值分割的视频风景处理方法及装置制造方法及图纸

本发明专利技术公开了一种基于自适应阈值分割的视频风景处理方法、装置、计算设备及计算机存储介质，该方法包括：实时获取视频中包含风景对象的当前帧图像；对当前帧图像进行场景分割处理，得到针对风景对象的前景概率信息，根据前景概率信息，确定前景区域占比，并依据前景区域占比，对前景概率信息进行映射处理，得到图像分割结果；根据图像分割结果，确定处理后的前景图像；绘制与处理后的前景图像的主题内容对应的风景内容效果贴图，并将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像；将帧处理图像覆盖当前帧图像得到处理后的视频数据；显示处理后的视频数据。该技术方案能够更为精准地对帧图像中的风景对象添加美化效果。

【技术实现步骤摘要】
基于自适应阈值分割的视频风景处理方法及装置
本专利技术涉及图像处理
，具体涉及一种基于自适应阈值分割的视频风景处理方法、装置、计算设备及计算机存储介质。
技术介绍
现有技术中，当用户需要对视频进行个性化处理时，例如为视频中的风景添加美化效果等，经常会使用到图像分割方法对视频中的帧图像进行场景分割处理，其中，采用基于深度学习的图像分割方法可以达到像素级别的分割效果。然而现有的图像分割方法在进行场景分割处理时，并不考虑前景图像在帧图像中所占比例，因此当前景图像在帧图像中所占比例较小时，利用现有的图像分割方法很容易将实际属于前景图像边缘处的像素点划分为背景图像，所得到的图像分割结果的分割精度较低、分割效果较差。因此，现有技术中的图像分割方式存在着图像场景分割的分割精度低下的问题，那么利用所得到的图像分割结果也无法很好地、精准地对视频中的风景添加美化效果，所得到的处理后的视频数据的显示效果较差。
技术实现思路
鉴于上述问题，提出了本专利技术以便提供一种克服上述问题或者至少部分地解决上述问题的基于自适应阈值分割的视频风景处理方法、装置、计算设备及计算机存储介质。根据本专利技术的一个方面，提供了一种基于自适应阈值分割的视频风景处理方法，该方法包括：实时获取图像采集设备所拍摄和/或所录制的视频中包含风景对象的当前帧图像；对当前帧图像进行场景分割处理，得到针对风景对象的前景概率信息，根据前景概率信息，确定前景区域占比，并依据前景区域占比，对前景概率信息进行映射处理，得到与当前帧图像对应的图像分割结果；根据图像分割结果，确定处理后的前景图像；绘制与处理后的前景图像的主题内容对应的风景内容效果贴图，并将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像；将帧处理图像覆盖当前帧图像得到处理后的视频数据；显示处理后的视频数据。进一步地，前景概率信息记录了用于反映当前帧图像中各个像素点属于前景图像的概率。进一步地，绘制与处理后的前景图像的主题内容对应的风景内容效果贴图进一步包括：对处理后的前景图像进行识别，确定处理后的前景图像的主题类别；从处理后的前景图像中提取出风景对象的关键信息；根据处理后的前景图像的主题类别和关键信息，绘制与处理后的前景图像的主题内容对应的风景内容效果贴图。进一步地，根据处理后的前景图像的主题类别和关键信息，绘制与处理后的前景图像的主题内容对应的风景内容效果贴图进一步包括：根据处理后的前景图像的主题类别，查找与处理后的前景图像的主题内容对应的基础风景内容效果贴图；依据关键信息，对基础风景内容效果贴图进行缩放处理和/或旋转处理，得到风景内容效果贴图。进一步地，将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像进一步包括：根据关键信息，确定与风景内容效果贴图对应的融合位置信息；按照融合位置信息，将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像。进一步地，在得到帧处理图像之后，该方法还包括：对帧处理图像进行色调处理、光照处理和/或亮度处理。进一步地，根据前景概率信息，确定前景区域占比进一步包括：根据前景概率信息，确定属于前景图像的像素点；计算属于前景图像的像素点在当前帧图像中所有像素点中的比例，将比例确定为前景区域占比。进一步地，根据前景概率信息，确定属于前景图像的像素点进一步包括：将前景概率信息中概率高于预设概率阈值的像素点确定为属于前景图像的像素点。进一步地，依据前景区域占比，对前景概率信息进行映射处理，得到与当前帧图像对应的图像分割结果进一步包括：依据前景区域占比，调整映射函数的参数；利用调整后的映射函数对前景概率信息进行映射处理，得到映射结果；根据映射结果，得到与当前帧图像对应的图像分割结果。进一步地，映射函数在预设定义区间内的斜率大于预设斜率阈值。进一步地，显示处理后的视频数据进一步包括：将处理后的视频数据实时显示；该方法还包括：将处理后的视频数据上传至云服务器。进一步地，将处理后的视频数据上传至云服务器进一步包括：将处理后的视频数据上传至云视频平台服务器，以供云视频平台服务器在云视频平台进行展示视频数据。进一步地，将处理后的视频数据上传至云服务器进一步包括：将处理后的视频数据上传至云直播服务器，以供云直播服务器将视频数据实时推送给观看用户客户端。进一步地，将处理后的视频数据上传至云服务器进一步包括：将处理后的视频数据上传至云公众号服务器，以供云公众号服务器将视频数据推送给公众号关注客户端。根据本专利技术的另一方面，提供了一种基于自适应阈值分割的视频风景处理装置，该装置包括：获取模块，适于实时获取图像采集设备所拍摄和/或所录制的视频中包含风景对象的当前帧图像；分割模块，适于对当前帧图像进行场景分割处理，得到针对风景对象的前景概率信息，根据前景概率信息，确定前景区域占比，并依据前景区域占比，对前景概率信息进行映射处理，得到与当前帧图像对应的图像分割结果；确定模块，适于根据图像分割结果，确定处理后的前景图像；处理模块，适于绘制与处理后的前景图像的主题内容对应的风景内容效果贴图，并将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像；覆盖模块，适于将帧处理图像覆盖当前帧图像得到处理后的视频数据；显示模块，适于显示处理后的视频数据。进一步地，前景概率信息记录了用于反映当前帧图像中各个像素点属于前景图像的概率。进一步地，处理模块进一步适于：对处理后的前景图像进行识别，确定处理后的前景图像的主题类别；从处理后的前景图像中提取出风景对象的关键信息；根据处理后的前景图像的主题类别和关键信息，绘制与处理后的前景图像的主题内容对应的风景内容效果贴图。进一步地，处理模块进一步适于：根据处理后的前景图像的主题类别，查找与处理后的前景图像的主题内容对应的基础风景内容效果贴图；依据关键信息，对基础风景内容效果贴图进行缩放处理和/或旋转处理，得到风景内容效果贴图。进一步地，处理模块进一步适于：根据关键信息，确定与风景内容效果贴图对应的融合位置信息；按照融合位置信息，将风景内容效果贴图与处理后的前景图像进行融合处理，得到帧处理图像。进一步地，处理模块进一步适于：对帧处理图像进行色调处理、光照处理和/或亮度处理。进一步地，分割模块进一步适于：根据前景概率信息，确定属于前景图像的像素点；计算属于前景图像的像素点在当前帧图像中所有像素点中的比例，将比例确定为前景区域占比。进一步地，分割模块进一步适于：将前景概率信息中概率高于预设概率阈值的像素点确定为属于前景图像的像素点。进一步地，分割模块进一步适于：依据前景区域占比，调整映射函数的参数；利用调整后的映射函数对前景概率信息进行映射处理，得到映射结果；根据映射结果，得到与当前帧图像对应的图像分割结果。进一步地，映射函数在预设定义区间内的斜率大于预设斜率阈值。进一步地，显示模块进一步适于：将处理后的视频数据实时显示；该装置还包括：上传模块，适于将处理后的视频数据上传至云服务器。进一步地，上传模块进一步适于：将处理后的视频数据上传至云视频平台服务器，以供云视频平台服务器在云视频平台进行展示视频数据。进一步地，上传模块进一步适于：将处理后的视频数据上传至云直播服务器，以供云直播服务器将视频数据实时推送给观看用户客户端。进一步地，上传模块进一步适本文档来自技高网...

【技术保护点】
一种基于自适应阈值分割的视频风景处理方法，所述方法包括：实时获取图像采集设备所拍摄和/或所录制的视频中包含风景对象的当前帧图像；对所述当前帧图像进行场景分割处理，得到针对风景对象的前景概率信息，根据所述前景概率信息，确定前景区域占比，并依据所述前景区域占比，对所述前景概率信息进行映射处理，得到与所述当前帧图像对应的图像分割结果；根据所述图像分割结果，确定处理后的前景图像；绘制与所述处理后的前景图像的主题内容对应的风景内容效果贴图，并将所述风景内容效果贴图与所述处理后的前景图像进行融合处理，得到帧处理图像；将所述帧处理图像覆盖所述当前帧图像得到处理后的视频数据；显示处理后的视频数据。

【技术特征摘要】
1.一种基于自适应阈值分割的视频风景处理方法，所述方法包括：实时获取图像采集设备所拍摄和/或所录制的视频中包含风景对象的当前帧图像；对所述当前帧图像进行场景分割处理，得到针对风景对象的前景概率信息，根据所述前景概率信息，确定前景区域占比，并依据所述前景区域占比，对所述前景概率信息进行映射处理，得到与所述当前帧图像对应的图像分割结果；根据所述图像分割结果，确定处理后的前景图像；绘制与所述处理后的前景图像的主题内容对应的风景内容效果贴图，并将所述风景内容效果贴图与所述处理后的前景图像进行融合处理，得到帧处理图像；将所述帧处理图像覆盖所述当前帧图像得到处理后的视频数据；显示处理后的视频数据。2.根据权利要求1所述的方法，其中，所述前景概率信息记录了用于反映所述当前帧图像中各个像素点属于前景图像的概率。3.根据权利要求1或2所述的方法，其中，所述绘制与所述处理后的前景图像的主题内容对应的风景内容效果贴图进一步包括：对所述处理后的前景图像进行识别，确定所述处理后的前景图像的主题类别；从所述处理后的前景图像中提取出风景对象的关键信息；根据所述处理后的前景图像的主题类别和所述关键信息，绘制与所述处理后的前景图像的主题内容对应的风景内容效果贴图。4.根据权利要求1-3任一项所述的方法，其中，所述根据所述处理后的前景图像的主题类别和所述关键信息，绘制与所述处理后的前景图像的主题内容对应的风景内容效果贴图进一步包括：根据所述处理后的前景图像的主题类别，查找与所述处理后的前景图像的主题内容对应的基础风景内容效果贴图；依据所述关键信息，对所述基础风景内容效果贴图进行缩放处理和/或旋转处理，得到风景内容效果贴图。5.根据权利要求1-4任一项所述的方法，其中，所述将所述风景内容效果贴图与所述处理后的前景图像进行融合处理，得到帧处理图像进一步包括：根据所述关键信息，确定与所述风景内容效果贴图对应的融合位...

【专利技术属性】
技术研发人员：赵鑫，邱学侃，颜水成，
申请(专利权)人：北京奇虎科技有限公司，
类型：发明
国别省市：北京,11