基于图像处理的会议转播方法、装置、设备及存储介质制造方法及图纸

本发明专利技术涉及人工智能技术，揭露了一种基于图像处理的会议转播方法、装置、电子设备及存储介质，其中方法，包括：对各个会议终端中的实时视频流进行分帧处理，得到原始会议视频帧，对原始会议视频帧进行不同采样处理得到高分辨参考视频帧、低分辨率参考视频帧及低分辨率输入视频帧；对高分辨参考视频帧、低分辨率参考视频帧及低分辨率输入视频帧进行特征信息匹配转移及特征融合处理，得到标准化视频会议融合特征图；根据标准化视频会议融合特征图，利用视频帧分辨率增强模块对低分辨率输入视频帧进行分辨率增强处理，得到增强视频帧，合成并显示增强视频流。本发明专利技术可以解决视频会议转播时画面分辨率低的问题。转播时画面分辨率低的问题。转播时画面分辨率低的问题。

Conference broadcasting method, device, equipment and storage medium based on image processing

【技术实现步骤摘要】
基于图像处理的会议转播方法、装置、设备及存储介质


[0001]本专利技术涉及人工智能
，尤其涉及一种基于图像处理的会议转播方法、装置、电子设备及计算机可读存储介质。

技术介绍

[0002]随着网络技术的快速发展，线上远程视频会议的应用场景越来越多。视频会议是指两个或两个以上不同区域的个人或群体，通过传输线路及多媒体设备，将声音、影像或文件资料等互传，以实现每方可以在屏幕上看到其他参会人头像或者投影内容。
[0003]在线上远程视频会议所涉及的场地比较大，但用于显示视频的显示器部署有限的应用场景中，距离显示器较远的用户难以看清显示器上所显示的内容，此时通常采用转播的方式来现实视频显示，在转播过程中由于会议场所的光源不同、设备型号不同或转播过程视频压缩，均会导致会议视频画面的分辨率低。

技术实现思路

[0004]本专利技术提供一种基于图像处理的会议转播方法、装置及计算机可读存储介质，其主要目的在于解决进行视频会议转播时画面分辨率低的问题。
[0005]为实现上述目的，本专利技术提供的一种基于图像处理的会议转播方本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像处理的会议转播方法，其特征在于，所述方法包括：获取传输至各个会议终端中的实时视频流，对所述实时视频流进行分帧处理，得到原始会议视频帧，并对所述原始会议视频帧进行下采样得到低分辨率视频帧，根据预设规则保留部分所述实时视频流作为高分辨参考视频帧；对所述高分辨参考视频帧及所述低分辨率视频帧分别进行采样，得到低分辨率参考视频帧及低分辨率输入视频帧；对所述高分辨参考视频帧、所述低分辨率参考视频帧及所述低分辨率输入视频帧进行特征信息匹配，得到最佳匹配特征子图集，并对所述低分辨率输入视频帧及所述最佳匹配特征子图集进行特征融合处理，得到标准化视频会议融合特征图；根据所述标准化视频会议融合特征图，利用预设的视频帧分辨率增强模块对所述低分辨率输入视频帧进行分辨率增强处理，得到增强视频帧，将所述增强视频帧合成为增强视频流；在所述视频会议的各个会议终端的显示设备中显示所述增强视频流。2.如权利要求1所述的基于图像处理的会议转播方法，其特征在于，所述对所述高分辨参考视频帧及所述低分辨率视频帧分别进行采样，得到低分辨率参考视频帧及低分辨率输入视频帧，包括：利用预构建的深度反向投影网络对所述高分辨参考视频帧进行下采样，得到低分辨率预参考视频帧；利用所述深度反向投影网络，采用与所述高分辨参考视频帧下采样互为倒数的采样倍率，对所述低分辨率预参考视频帧及所述低分辨率视频帧同时进行上采样，得到低分辨率参考视频帧及低分辨率输入视频帧。3.如权利要求1所述的基于图像处理的会议转播方法，其特征在于，所述对所述高分辨参考视频帧、所述低分辨率参考视频帧及所述低分辨率输入视频帧进行特征信息匹配，得到最佳匹配特征子图集，并对所述低分辨率输入视频帧及所述最佳匹配特征子图集进行特征融合处理，得到标准化视频会议融合特征图，包括：分别提取所述高分辨参考视频帧、所述低分辨率参考视频帧及所述低分辨率输入视频帧的图像特征，得到高分辨参考视频帧特征图、低分辨率参考视频帧特征图及低分辨率输入视频帧特征图；按照预设拆分规则将所述高分辨参考视频帧特征图、所述低分辨率参考视频帧特征图及所述低分辨率输入视频帧特征图分别拆分为高分辨参考视频帧特征子图集、低分辨率参考视频帧特征子图集及低分辨率输入视频帧特征子图集；将所述低分辨率参考视频帧特征子图集与所述低分辨率输入视频帧特征子图集进行特征信息匹配，得到第一最佳匹配特征子图集；利用空间位置映射关系在所述高分辨参考视频帧特征子图集中匹配出所述低分辨率输入视频帧特征子图集的第二最佳匹配特征子图集；对所述第一最佳匹配特征子图集及所述第二最佳匹配特征子图集进行特征信息重组及转移，得到视频会议转移特征图；将所述低分辨率输入视频帧特征图与所述视频会议转移特征图进行特征信息融合并标准化，得到标准化视频会议融合特征图。
4.如权利要求3所述的基于图像处理的会议转播方法，其特征在于，所述将所述低分辨率参考视频帧特征子图集与所述低分辨率输入视频帧特征子图集进行特征信息匹配，得到第一最佳匹配特征子图集，包括：随机选择所述低分辨率输入视频帧特征子图集第i个特征子图，其中i为正整数；计算所述第i个特征子图与所述低分辨率参考视频帧特征子图集每个特征子图的特征相似度；选择特征相似度最大的低分辨率参考视频帧特征子图作为第i个特征子图的第一最佳匹配特征子图；返回所述随机选择所述低分辨率输入视频帧特征子图集第i个特征子图的步骤，直至遍历完所述低分辨率输入视频帧特征子图集中所有特征子图，得到第一最佳匹配特征子图集。5.如权利要求3所述的基于图像处理的会议转播方法，其特征在于，所述将所述低分辨率输入视频帧特征图与所述视频会议转移特征图进行特征信息融合并标准化，得到标准化视频会议融合特征图，包括：利用引导滤波的方法将所述低分辨率输入视频帧特征图与所述视频会议转移特征图进行特征信息融合，得到视频会议融合特征图；利用...

【专利技术属性】
技术研发人员：王志超，
申请(专利权)人：深圳达慧信息技术有限公司，
类型：发明
国别省市：