当前位置: 首页 > 专利查询>赵蒙专利>正文

基于远程互动和云计算的媒体数据处理方法及大数据平台技术

技术编号:26426244 阅读:63 留言:0更新日期:2020-11-20 14:23
本发明专利技术实施例提供一种基于远程互动和云计算的媒体数据处理方法及大数据平台,在视频互动进程中,通过确定第一编码窗口对应的与视频互动进程相匹配的第三编码窗口,以及第二编码窗口对应的与视频互动进程相匹配的第四编码窗口,从而根据第一编码窗口、第二编码窗口、第三编码窗口、第四编码窗口及互动进行标签,确定视频互动进程中的编码联动窗口信息,并由此对数据编码控制深度学习模型的编码控制过程进行更新。如此,能够基于存在关联关系的编码窗口对当前的数据编码控制深度学习模型的编码控制过程进行更新,这样可以便于在下一轮编码控制中适应性调整编码过程,进而提高编码效果。

【技术实现步骤摘要】
基于远程互动和云计算的媒体数据处理方法及大数据平台
本专利技术涉及音视频处理
,具体而言,涉及一种基于远程互动和云计算的媒体数据处理方法及大数据平台。
技术介绍
目前,随着互联网高速通信技术的演进,在线视频服务终端广泛应用于各大自媒体在线互动中心,在视频互动的过程中,也给视频编码技术带来了极大的挑战,传统视频互动服务中,在编码控制时需要对编码窗口进行依序控制,因此并没有考虑到编码窗口之间的关联关系,如此会导致导致实际编码效果较差,无法迎合实际的业务情况。
技术实现思路
为了至少克服现有技术中的上述不足,本专利技术的目的在于提供一种基于远程互动和云计算的媒体数据处理方法及大数据平台,能够基于存在关联关系的编码窗口对当前的数据编码控制深度学习模型的编码控制过程进行更新,这样可以便于在下一轮编码控制中适应性调整编码过程,进而提高编码效果。第一方面,本专利技术实施例提供一种基于远程互动和云计算的媒体数据处理方法,应用于大数据平台,所述大数据平台与多个在线视频服务终端通信连接,并与用于在每个在线视频服务终端进行视频服务互动的视频服务互动终端通信连接,所述方法包括:通过每个互动服务元素的视频编码插件中的数据编码控制深度学习模型对所述在线视频服务终端与对应的视频服务互动终端之间所建立的视频互动信道中的在线互动视频信息进行数据编码控制;确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中第一编码窗口及第二编码窗口,其中,所述编码视频帧区域为视频互动进程中预先设定的互动进行标签所对应的编码区域;在所述视频互动进程中,确定所述第一编码窗口对应的与所述视频互动进程相匹配的第三编码窗口,以及所述第二编码窗口对应的与所述视频互动进程相匹配的第四编码窗口;根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述互动进行标签,确定所述视频互动进程中的编码联动窗口信息,并根据所述视频互动进程中的编码联动窗口信息对所述数据编码控制深度学习模型的编码控制过程进行更新。在第一方面的一种可能的实现方式中,所述根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述互动进行标签,确定所述视频互动进程中的编码联动窗口信息的步骤,包括:根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述编码视频帧区域,确定所述视频互动进程中的编码联动检测信息,其中,所述编码视频帧区域包括互动进行标签,所述编码联动检测信息包括编码联动窗口信息。在第一方面的一种可能的实现方式中,所述根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述编码视频帧区域,确定所述视频互动进程中的编码联动检测信息的步骤,包括:根据所述第一编码窗口与所述第二编码窗口的第一编码关联关系,及所述第三编码窗口与所述第四编码窗口之间的第二编码关联关系,对所述编码视频帧区域进行编码窗口更新,使得所述第一编码关联关系与所述第二编码关联关系相等;根据编码窗口更新后的编码视频帧区域,以及所述第三编码窗口和所述第四编码窗口,确定所述视频互动进程中的编码联动检测信息。在第一方面的一种可能的实现方式中,所述根据编码窗口更新后的编码视频帧区域,以及所述第三编码窗口和所述第四编码窗口,确定所述视频互动进程中的编码联动检测信息的步骤,包括:根据所述第一编码窗口、所述第二编码窗口分别在所述编码窗口更新后的编码视频帧区域中对应的编码偏移信息、所述编码窗口更新后的编码视频帧区域中互动进行标签、所述编码窗口更新后的编码视频帧区域的边缘点位置,以及所述第三编码窗口和所述第四编码窗口,计算得到所述视频互动进程中的编码联动检测信息;或者在所述视频互动进程中更新所述编码窗口更新后的编码视频帧区域,使得所述第一编码窗口在所述编码窗口更新后的编码视频帧区域中对应的扩展元素与所述第三编码窗口对应的扩展元素重合,且所述第二编码窗口在所述编码窗口更新后的编码视频帧区域中对应的扩展元素与所述第四编码窗口对应的扩展元素重合,并根据扩展元素的偏移信息,确定所述视频互动进程中的编码联动检测信息。在第一方面的一种可能的实现方式中,所述确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中第一编码窗口及第二编码窗口的步骤,包括:确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中存在协同编码关系的第一编码窗口及第二编码窗口,或者存在编码时序前后关系的第一编码窗口及第二编码窗口。在第一方面的一种可能的实现方式中,所述在所述视频互动进程中,确定所述第一编码窗口对应的与所述视频互动进程相匹配的第三编码窗口,以及所述第二编码窗口对应的与所述视频互动进程相匹配的第四编码窗口的步骤,包括:在所述视频互动进程中,确定所述第一编码窗口的编码标签类型对应的与所述视频互动进程相匹配的编码标签类型的第三编码窗口,以及所述第二编码窗口的编码标签类型对应的与所述视频互动进程相匹配的编码标签类型的第四编码窗口。在第一方面的一种可能的实现方式中,所述根据所述视频互动进程中的编码联动窗口信息对所述数据编码控制深度学习模型的编码控制过程进行更新的步骤,包括:获取所述视频互动进程中的编码联动窗口信息表征的编码联动窗口对象,针对所述数据编码控制深度学习模型的编码控制过程中的每个对应的编码控制节点的编码控制对象,获取该编码控制节点的编码控制对象的第一重建编码快信息,其中,所述第一重建编码快信息用于表征该编码控制节点的编码控制子过程的编码方式配置和编码压缩分量配置;根据所述编码联动窗口对象所关联的每个编码复杂性特征分别对所述第一重建编码快信息进行联动更新,获得第一编码方式联动信息和与第一编码方式联动信息对应的编码压缩分量联动信息;获取该编码控制节点的编码控制对象的第一编码控制场景特征和场景可变化特征,提取第一编码控制场景特征的场景特征向量,所述第一编码控制场景特征的场景特征向量包括特定场景特征向量;获取所述数据编码控制深度学习模型的编码控制过程关联的历史编码控制对象的特定场景特征向量,并根据该特定场景特征向量更新所述第一编码控制场景特征的特定场景特征向量,使所述第一编码控制场景特征中各个特定场景特征向量之间的关联顺序与预设历史编码控制对象中各个特定场景特征向量之间的关联顺序匹配;在更新结束后,获得第二编码控制场景特征的场景特征向量,并根据所述第二编码控制场景特征的场景特征向量生成第二编码控制场景特征;根据所述场景可变化特征和所述第二编码控制场景特征的场景特征向量,查找得到与所述场景可变化特征相匹配的编码压缩分量联动信息以及与所述编码压缩分量联动信息对应的第一编码方式联动信息,根据所述第二编码控制场景特征的场景特征向量对与所述编码压缩分量联动信息对应的第一编码方式联动信息进行更新,获得第二编码方式联动信息;将所述第二编码方式联动信息与所述第二编码控本文档来自技高网...

【技术保护点】
1.一种基于远程互动和云计算的媒体数据处理方法,其特征在于,应用于大数据平台,所述大数据平台与多个在线视频服务终端通信连接,并与用于在每个在线视频服务终端进行视频服务互动的视频服务互动终端通信连接,所述方法包括:/n通过每个互动服务元素的视频编码插件中的数据编码控制深度学习模型对所述在线视频服务终端与对应的视频服务互动终端之间所建立的视频互动信道中的在线互动视频信息进行数据编码控制;/n确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中第一编码窗口及第二编码窗口,其中,所述编码视频帧区域为视频互动进程中预先设定的互动进行标签所对应的编码区域;/n在所述视频互动进程中,确定所述第一编码窗口对应的与所述视频互动进程相匹配的第三编码窗口,以及所述第二编码窗口对应的与所述视频互动进程相匹配的第四编码窗口;/n根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述互动进行标签,确定所述视频互动进程中的编码联动窗口信息,并根据所述视频互动进程中的编码联动窗口信息对所述数据编码控制深度学习模型的编码控制过程进行更新。/n

【技术特征摘要】
1.一种基于远程互动和云计算的媒体数据处理方法,其特征在于,应用于大数据平台,所述大数据平台与多个在线视频服务终端通信连接,并与用于在每个在线视频服务终端进行视频服务互动的视频服务互动终端通信连接,所述方法包括:
通过每个互动服务元素的视频编码插件中的数据编码控制深度学习模型对所述在线视频服务终端与对应的视频服务互动终端之间所建立的视频互动信道中的在线互动视频信息进行数据编码控制;
确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中第一编码窗口及第二编码窗口,其中,所述编码视频帧区域为视频互动进程中预先设定的互动进行标签所对应的编码区域;
在所述视频互动进程中,确定所述第一编码窗口对应的与所述视频互动进程相匹配的第三编码窗口,以及所述第二编码窗口对应的与所述视频互动进程相匹配的第四编码窗口;
根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述互动进行标签,确定所述视频互动进程中的编码联动窗口信息,并根据所述视频互动进程中的编码联动窗口信息对所述数据编码控制深度学习模型的编码控制过程进行更新。


2.根据权利要求1所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述互动进行标签,确定所述视频互动进程中的编码联动窗口信息的步骤,包括:
根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述编码视频帧区域,确定所述视频互动进程中的编码联动检测信息,其中,所述编码视频帧区域包括互动进行标签,所述编码联动检测信息包括编码联动窗口信息。


3.根据权利要求2所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述根据所述第一编码窗口、所述第二编码窗口、所述第三编码窗口、所述第四编码窗口及所述编码视频帧区域,确定所述视频互动进程中的编码联动检测信息的步骤,包括:
根据所述第一编码窗口与所述第二编码窗口的第一编码关联关系,及所述第三编码窗口与所述第四编码窗口之间的第二编码关联关系,对所述编码视频帧区域进行编码窗口更新,使得所述第一编码关联关系与所述第二编码关联关系相等;
根据编码窗口更新后的编码视频帧区域,以及所述第三编码窗口和所述第四编码窗口,确定所述视频互动进程中的编码联动检测信息。


4.根据权利要求3所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述根据编码窗口更新后的编码视频帧区域,以及所述第三编码窗口和所述第四编码窗口,确定所述视频互动进程中的编码联动检测信息的步骤,包括:
根据所述第一编码窗口、所述第二编码窗口分别在所述编码窗口更新后的编码视频帧区域中对应的编码偏移信息、所述编码窗口更新后的编码视频帧区域中互动进行标签、所述编码窗口更新后的编码视频帧区域的边缘点位置,以及所述第三编码窗口和所述第四编码窗口,计算得到所述视频互动进程中的编码联动检测信息;或者
在所述视频互动进程中更新所述编码窗口更新后的编码视频帧区域,使得所述第一编码窗口在所述编码窗口更新后的编码视频帧区域中对应的扩展元素与所述第三编码窗口对应的扩展元素重合,且所述第二编码窗口在所述编码窗口更新后的编码视频帧区域中对应的扩展元素与所述第四编码窗口对应的扩展元素重合,并根据扩展元素的偏移信息,确定所述视频互动进程中的编码联动检测信息。


5.根据权利要求1-4中任意一项所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中第一编码窗口及第二编码窗口的步骤,包括:
确定在数据编码控制过程中所述在线视频服务终端当前进行在线视频互动的编码视频帧区域中存在协同编码关系的第一编码窗口及第二编码窗口,或者存在编码时序前后关系的第一编码窗口及第二编码窗口。


6.根据权利要求1-4中任意一项所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述在所述视频互动进程中,确定所述第一编码窗口对应的与所述视频互动进程相匹配的第三编码窗口,以及所述第二编码窗口对应的与所述视频互动进程相匹配的第四编码窗口的步骤,包括:
在所述视频互动进程中,确定所述第一编码窗口的编码标签类型对应的与所述视频互动进程相匹配的编码标签类型的第三编码窗口,以及所述第二编码窗口的编码标签类型对应的与所述视频互动进程相匹配的编码标签类型的第四编码窗口。


7.根据权利要求1-4中任意一项所述的基于远程互动和云计算的媒体数据处理方法,其特征在于,所述根据所述视频互动进程中的编码联动窗口信息对所述数据编码控制深度学习模型的编码控制过程进行更新的步骤,包括:
获取所述视频互动进程中的编码联动窗口信息表征的编码联动窗口对象,针对所述数据编码控制深度学习模型的编码控制过程中的每...

【专利技术属性】
技术研发人员:赵蒙
申请(专利权)人:赵蒙
类型:发明
国别省市:云南;53

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1