直播视频处理方法及系统技术方案

本申请实施例提供一种直播视频处理方法及系统，涉及直播视频图像处理技术领域。服务器将直播视频帧序列发送给直播端进行画面渲染，并对直播视频帧序列中的各视频帧进行违规字符识别，在识别到存在违规字符时生成打码指令，并将打码指令发送给直播端；直播端基于打码指令在画面渲染过程中对视频帧中存在违规字符的区域进行打码处理。上述方案可以分别进行画面渲染和打码指令的生成，并基于生成的打码指令对存在违规字符所在区域进行打码处理，如此可以实现对直播视频中违规内容的实时打码，无需人工参与，可以达到减少违规信息曝光、保护平台内容安全、避免主播遭受被动违规处罚等目的。等目的。等目的。

【技术实现步骤摘要】
直播视频处理方法及系统


[0001]本申请涉及直播视频图像处理
，具体而言，涉及一种直播视频处理方法及系统。

技术介绍

[0002]随着互联网技术的日益发展，直播成为了一种越来越普遍的互联网形态，与之而来的是图片、视频内容呈现出了指数级别的增长。海量数据的增长也带来了一系列的挑战和问题，繁多场景及数据下难免夹杂各种各样的违规信息，其中字符违规是其中最为常见的类型。为保障直播生态内容安全，如何快速有效从海量数据中发现字符违规内容是各个内容平台厂商必须要解决的问题。并且针对直播平台而言，除了画面内容合规要求外，也需要兼顾良好的用户体验，因此如何做到有效防范违规同时不影响用户是一个新的挑战。

技术实现思路

[0003]为了解决上述技术问题，本申请提供一种直播视频处理方法及系统。
[0004]第一方面，本申请实施例提供一种视频处理方法，应用于直播视频处理系统，所述直播视频处理系统包括通信连接的服务器和直播端，所述方法包括：
[0005]所述服务器将直播视频帧序列发送给所述直播端进行画面渲染；r/>[0006]所本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种直播视频处理方法，其特征在于，应用于直播视频处理系统，所述直播视频处理系统包括通信连接的服务器和直播端，所述方法包括：所述服务器将直播视频帧序列发送给所述直播端进行画面渲染；所述服务器对所述直播视频帧序列中的各视频帧进行违规字符识别，在识别到存在违规字符时生成打码指令，并将所述打码指令发送给所述直播端；所述直播端基于所述打码指令在画面渲染过程中对所述视频帧中存在违规字符的区域进行打码处理。2.如权利要求1所述的直播视频处理方法，其特征在于，所述服务器对所述直播视频帧序列中的各视频帧进行违规字符识别，在识别到存在违规字符时生成打码指令，并将所述打码指令发送给所述直播端的步骤，包括：所述服务器基于文本区域检测模型对直播视频帧序列中的视频帧进行文本区域检测，得到各视频帧中文本所在的文本区域；基于字符识别模型对所述各视频帧中的文本区域进行字符识别得到文本内容；将所述文本内容中的字符与违规词库中的违规字符进行匹配，得到违规字符在所述文本区域中的目标位置区域；基于所述目标位置区域生成打码指令，并将所述打码指令发送给所述直播端。3.如权利要求2所述的直播视频处理方法，其特征在于，所述文本区域检测模型包括特征提取网络、特征融合网络及输出网络，所述服务器基于文本区域检测模型对直播视频帧序列中的视频帧进行文本区域检测，得到各视频帧中文本所在的文本区域的步骤，包括：将直播视频帧序列中的视频帧输入所述特征提取网络中，通过所述特征提取网络中的多个梯度流分支进行特征提取，获得视频帧的梯度流特征信息；将所述视频帧的梯度流特征信息输入多尺度特征金字塔结构的特征融合网络中进行融合，得到同时具有语义信息和定位信息的融合特征信息；将所述融合特征信息输入所述输出网络中，对所述视频帧中文本所在的文本区域进行预测，并输出各视频帧中文本所在的文本区域。4.如权利要求2所述的直播视频处理方法，其特征在于，所述字符识别模型包括卷积神经网络、递归神经网络及解码网络，所述基于字符识别模型对所述各视频帧中的文本区域进行字符识别得到文本内容的步骤，包括：将所述各视频帧中的文本区域输入所述卷积神经网络中进行特征提取，得到所述文本区域的特征序列；将所述文本区域的特征序列输入到所述递归神经网络中，对所述特征序列中的特征向量进行学习，并输出预测标签字符的概率分布；将所述标签字符的概率分布输入所述解码网络中，从所述解码网络的循环层中获取标签字符序列，由所述标签字符序列形成的所述文本内容。5.如权利要求4所述的直播视频处理方法，其特征在于，所述将所述标签字符的概率分...

【专利技术属性】
技术研发人员：吴健，黄颖，张文伟，
申请(专利权)人：广州虎牙科技有限公司，
类型：发明
国别省市：