一种多媒体数据传输控制方法及系统技术方案

本申请提供了一种多媒体数据传输控制方法及系统，包含对频谱描述子进行增强及图像敏感内容识别，每次更新优化的增强操作均至少综合第一视频表征载体，通过视频图像增强后，可以最大限度维持待传输视频数据中的原始图像敏感内容，防止因为视频图像增强破坏图像敏感内容引起的敏感内容误识别的情况，此外，可以增加视频图像增强效果，帮助提升对目标表征载体识别图像敏感内容的精度

【技术实现步骤摘要】
一种多媒体数据传输控制方法及系统


[0001]本申请涉及图像数据处理领域，具体而言，涉及一种多媒体数据传输控制方法及系统
。

技术介绍

[0002]多媒体数据在进行传输时，对数据内容进行脱敏是保护个人隐私和敏感信息的重要环节
。
例如，通过监控设备采集的特定区域的监控视频时，被监控人员的人脸信息
、
敏感部位等需要进行脱敏
。
在进行脱敏前，针对清晰度不足的视频帧图像需要进行增强操作，目前，采用机器学习模型对图像进行增强时，如果模型性能没有优化完善，可能造成增强泛化性差，不仅没有达到增强的效果，还令原图像的信息丢失，影响后续脱敏的准确性
。

技术实现思路

[0003]本专利技术的目的在于提供一种多媒体数据传输控制方法及系统以改善上述问题
。
[0004]本申请实施例是这样实现的：第一方面，本申请实施例提供了一种多媒体数据传输控制方法，包括：获取待传输视频数据的频谱描述子，并确定为第一视频表征载体；对于所述第一视频表征载体进行更新优化操作；每一次更新优化操作包括：通过所述第一视频表征载体确定拟增强表征载体，并通过对于过往待传输视频数据得到的过往拟增强表征载体，得到当前更新优化对应的增强状态结果，以及通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到当前更新优化对应的备选表征载体；其中，在首次更新优化操作中，所述拟增强表征载体为所述第一视频表征载体，在第
n
次更新优化操作中，所述拟增强表征载体通过所述第一视频表征载体和已得到的备选表征载体整合得到，
n
＞1；将末次更新优化得到的备选表征载体确定成目标表征载体，以及通过对于所述目标表征载体进行实体对象检测得到的目标图像增强变量，对所述第一视频表征载体进行增强操作，得到第二视频表征载体；根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果；根据所述敏感内容识别结果对所述待传输视频数据进行脱敏处理后传输
。
[0005]可选的实施方式中，所述获取待传输视频数据的频谱描述子，包括：对待传输视频数据进行小波变换，获得所述待传输视频数据的小波描述子；对于所述待传输视频数据的小波描述子进行卷积平滑操作，得到对应的频谱描述子；对于一次更新优化操作：如果是首次更新优化操作，则将所述第一视频表征载体确定成拟增强表征载体，以及通过对于过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态
结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述首次更新优化操作对应的备选表征载体；如果是第二次更新优化操作，则将所述第一视频表征载体和当前更新优化的上一次更新优化操作得到的一个备选表征载体整合成拟增强表征载体，以及通过对于所述过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述第二次更新优化操作对应的备选表征载体；如果是第三次更新优化操作，则将所述第一视频表征载体和当前更新优化的上两次更新优化得到的两个备选表征载体整合成拟增强表征载体，以及通过对于所述过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述第三次更新优化操作对应的备选表征载体
。
[0006]可选的实施方式中，所述拟增强表征载体的整合策略，包括：根据预设的组合先后顺序对已得到的各备选表征载体和所述第一视频表征载体进行表征载体组合操作，得到拟增强表征载体；或者；根据已得到的各备选表征载体分别对应的整合调节变量，以及所述第一视频表征载体对应的整合调节变量，对所述各备选表征载体和所述第一视频表征载体进行偏心调节整合，获得拟增强表征载体；其中，每个所述整合调节变量用于指示相应的备选表征载体或所述第一视频表征载体对所述拟增强表征载体的牵涉强度；所述对于所述目标表征载体进行实体对象检测得到的目标图像增强变量，对所述第一视频表征载体进行增强操作，得到第二视频表征载体，包括：对所述目标表征载体进行维数调节处理，获得表征载体维数与所述第一视频表征载体对应的过渡表征载体；对所述过渡表征载体进行标准化操作，得到标准化结果，将所述标准化结果确定成目标图像增强变量；根据所述目标图像增强变量求取与所述第一视频表征载体的数量积，得到第二视频表征载体
。
[0007]可选的实施方式中，所述根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果，包括：对于所述第二视频表征载体进行视频表征载体预测，得到所述第二视频表征载体中具有图像敏感内容的识别置信度；如果所述识别置信度大于预设的敏感临界置信度，则确定所述待传输视频数据中具有所述图像敏感内容
。
[0008]可选的实施方式中，所述根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果，包括：获取待传输视频数据和敏感内容拓扑图；将所述待传输视频数据输入视频识别神经网络进行语义理解，得到所述待传输视频数据的多个视频帧图像分块的分块表征载体；
通过表征载体解析网络，对所述敏感内容拓扑图进行表征载体解析，得到所述敏感内容拓扑图的敏感内容表征载体，所述敏感内容表征载体表征所述敏感内容拓扑图的敏感层级语义表征向量；对所述敏感内容表征载体
、
所述分块表征载体和所述第二视频表征载体进行载体整合，得到目标整合结果；将所述目标整合结果输入敏感信息分类网络进行敏感信息分类，得到所述待传输视频数据对应的分类敏感信息
。
[0009]可选的实施方式中，所述表征载体解析网络包括与所述敏感内容拓扑图中的多个拓扑点具有匹配结果的多个表征载体组合算子，所述通过表征载体解析网络，对所述敏感内容拓扑图进行表征载体解析，得到所述敏感内容拓扑图的敏感内容表征载体，包括：对所述多个拓扑点中每个拓扑点的敏感信息进行语义理解，得到所述每个拓扑点对应的拓扑点语义向量；将所述敏感内容拓扑图的底层拓扑点对应的拓扑点语义向量输入与所述底层拓扑点对应的表征载体组合算子，得到所述底层拓扑点对应的拓扑点组合表征载体信息；从所述底层拓扑点的上级拓扑点出发，遍历所述多个拓扑点；将当次浏览到的拓扑点的下级拓扑点对应的拓扑点组合表征载体信息和所述当次浏览到的拓扑点对应的拓扑点语义向量输入与所述当次浏览到的拓扑点对应的表征载体组合算子，得到所述当次浏览到的拓扑点对应的拓扑点组合表征载体信息；遍历完所述多个拓扑点后，将所述敏感内容拓扑图中顶层拓扑点对应的拓扑点组合表征载体信息确定为所述敏感内容表征载体；所述视频识别神经网络包括视频帧分块算子
、
语义理解算子和语义整合算子，所述将所述待传输视频数据输入视频识别神经网络进行语义理解，得到所述待传输视频数据的多个视频帧图像分块的分块表征载体，包括：将所述待传输视频数据输入所述视频帧分块算子进行视频帧分块操作，得到所述多个视频帧本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种多媒体数据传输控制方法，其特征在于，包括：获取待传输视频数据的频谱描述子，并确定为第一视频表征载体；对于所述第一视频表征载体进行更新优化操作；每一次更新优化操作包括：通过所述第一视频表征载体确定拟增强表征载体，并通过对于过往待传输视频数据得到的过往拟增强表征载体，得到当前更新优化对应的增强状态结果，以及通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到当前更新优化对应的备选表征载体；其中，在首次更新优化操作中，所述拟增强表征载体为所述第一视频表征载体，在第
n
次更新优化操作中，所述拟增强表征载体通过所述第一视频表征载体和已得到的备选表征载体整合得到，
n
＞1；将末次更新优化得到的备选表征载体确定成目标表征载体，以及通过对于所述目标表征载体进行实体对象检测得到的目标图像增强变量，对所述第一视频表征载体进行增强操作，得到第二视频表征载体；根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果；根据所述敏感内容识别结果对所述待传输视频数据进行脱敏处理后传输
。2.
根据权利要求1所述的多媒体数据传输控制方法，其特征在于，所述获取待传输视频数据的频谱描述子，包括：对待传输视频数据进行小波变换，获得所述待传输视频数据的小波描述子；对于所述待传输视频数据的小波描述子进行卷积平滑操作，得到对应的频谱描述子；对于一次更新优化操作：如果是首次更新优化操作，则将所述第一视频表征载体确定成拟增强表征载体，以及通过对于过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述首次更新优化操作对应的备选表征载体；如果是第二次更新优化操作，则将所述第一视频表征载体和当前更新优化的上一次更新优化操作得到的一个备选表征载体整合成拟增强表征载体，以及通过对于所述过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述第二次更新优化操作对应的备选表征载体；如果是第三次更新优化操作，则将所述第一视频表征载体和当前更新优化的上两次更新优化得到的两个备选表征载体整合成拟增强表征载体，以及通过对于所述过往待传输视频数据得到的相应过往拟增强表征载体，得到对应的增强状态结果，并通过所述增强状态结果对所述拟增强表征载体进行增强操作，得到所述第三次更新优化操作对应的备选表征载体
。3.
根据权利要求1所述的多媒体数据传输控制方法，其特征在于，所述拟增强表征载体的整合策略，包括：根据预设的组合先后顺序对已得到的各备选表征载体和所述第一视频表征载体进行表征载体组合操作，得到拟增强表征载体；或者；
根据已得到的各备选表征载体分别对应的整合调节变量，以及所述第一视频表征载体对应的整合调节变量，对所述各备选表征载体和所述第一视频表征载体进行偏心调节整合，获得拟增强表征载体；其中，每个所述整合调节变量用于指示相应的备选表征载体或所述第一视频表征载体对所述拟增强表征载体的牵涉强度；所述对于所述目标表征载体进行实体对象检测得到的目标图像增强变量，对所述第一视频表征载体进行增强操作，得到第二视频表征载体，包括：对所述目标表征载体进行维数调节处理，获得表征载体维数与所述第一视频表征载体对应的过渡表征载体；对所述过渡表征载体进行标准化操作，得到标准化结果，将所述标准化结果确定成目标图像增强变量；根据所述目标图像增强变量求取与所述第一视频表征载体的数量积，得到第二视频表征载体
。4.
根据权利要求1所述的多媒体数据传输控制方法，其特征在于，所述根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果，包括：对于所述第二视频表征载体进行视频表征载体预测，得到所述第二视频表征载体中具有图像敏感内容的识别置信度；如果所述识别置信度大于预设的敏感临界置信度，则确定所述待传输视频数据中具有所述图像敏感内容
。5.
根据权利要求1所述的多媒体数据传输控制方法，其特征在于，所述根据所述第二视频表征载体，进行图像敏感内容识别，获得所述待传输视频数据的敏感内容识别结果，包括：获取待传输视频数据和敏感内容拓扑图；将所述待传输视频数据输入视频识别神经网络进行语义理解，得到所述待传输视频数据的多个视频帧图像分块的分块表征载体；通过表征载体解析网络，对所述敏感内容拓扑图进行表征载体解析，得到所述敏感内容拓扑图的敏感内容表征载体，所述敏感内容表征载体表征所述敏感内容拓扑图的敏感层级语义表征向量；对所述敏感内容表征载体
、
所述分块表征载体和所述第二视频表征载体进行载体整合，得到目标整合结果；将所述目标整合结果输入敏感信息分类网络进行敏感信息分类，得到所述待传输视频数据对应的分类敏感信息
。6.
根据权利要求5所述的多媒体数据传输控制方法，其特征在于，所述表征载体解析网络包括与所述敏感内容拓扑图中的多个拓扑点具有匹配结果的多个表征载体组合算子，所述通过表征载体解析网络，对所述敏感内容拓扑图进行表征载体解析，得到所述敏感内容拓扑图的敏感内容表征载体，包括：对所述多个拓扑...

【专利技术属性】
技术研发人员：李坚，何梁亚，
申请(专利权)人：南京良亚科技有限责任公司，
类型：发明
国别省市：