System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 多媒体数据处理方法、装置和计算机可读存储介质制造方法及图纸_技高网

多媒体数据处理方法、装置和计算机可读存储介质制造方法及图纸

技术编号:39952800 阅读:9 留言:0更新日期:2024-01-08 23:26
本发明专利技术公开了多媒体数据处理方法、装置和计算机可读存储介质,获取多媒体数据的音频流和视频流;解析音频流,得到文本特征数据,根据预设的映射关系对照匹配文本特征数据以确定话题特征数据;解析视频流,得到表情特征数据,根据预设的映射关系对照匹配表情特征数据以确定情感指数;基于文本特征数据、情感指数和话题特征数据对多媒体数据进行渲染。基于此,本发明专利技术通过对多人商谈通话的信息流解析提取、智能分析和渲染增强,在现有通话产品的语音和视频的基础上,挖掘出多维度的价值信息,有效的挖掘通话类产品的潜在价值,为商务通话提供多维度的辅助信息,提高商谈效果。

【技术实现步骤摘要】

本专利技术实施例涉及但不限于数据处理,特别是涉及一种多媒体数据处理方法、装置和计算机可读取存储介质。


技术介绍

1、随着经济全球化,跨地域的商务沟通越发频繁,目前的远程商务会议多通过视频会议系统进行,通过传输线路及多媒体设备,将声音、影像及文件资料互传,实现即时且互动的沟通,随着增强现实技术的发展以及5g技术高通量低延时确定性网络的出现,为视频通话乃至增强现实场景带来了高性能的处理潜力,同时,业务层面也需要商务视频会议能够从数据通道中挖掘提供更多有效的会谈辅助信息,然而,当前主流的商务会议通话产品仅仅提供视频语音通话控制和媒体通道服务,缺乏对通道数据进行多维度的分析挖掘和二次加工,没有对媒体数据进行有效的挖掘利用。


技术实现思路

1、以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

2、本专利技术实施例提供了一种多媒体数据处理方法、装置和计算机可读存储介质,能够从商务通话的多媒体数据中挖掘分离出多维度信息并进行二次加工,为商务通话提供多维度的辅助信息,提高商谈效果。

3、第一方面,本专利技术实施例提供了一种多媒体数据处理方法,包括:获取多媒体数据的音频流和视频流;解析所述音频流,得到文本特征数据,根据预设的映射关系对照匹配所述文本特征数据以确定话题特征数据;解析所述视频流,得到表情特征数据,根据预设的映射关系对照匹配所述表情特征数据以确定情感指数;基于所述文本特征数据、所述情感指数和所述话题特征数据对所述多媒体数据进行渲染。

4、第二方面,本专利技术实施例提供了一种多媒体数据处理装置,包括:音频处理模块,用于接收并解析音频流,获得文本特征数据;视频处理模块,用于接收并解析视频流,得到表情特征数据;映射关系模块,用于处理所述文本特征数据得到话题特征数据,处理所述表情特征数据得到情感指数;渲染模块,用于将所述文本特征数据、所述话题特征数据和所述情感指数与所述视频流渲染。

5、第三方面,本专利技术实施例提供了一种电子设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上第一方面所述的多媒体数据处理方法。

6、第四方面,本专利技术实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行程序,所述计算机可执行程序用于使计算机执行如上第一方面所述的多媒体数据处理方法。

7、本专利技术实施例包括:获取多媒体数据的音频流和视频流;解析所述音频流,得到文本特征数据,根据预设的映射关系对照匹配所述文本特征数据以确定话题特征数据;解析所述视频流,得到表情特征数据,根据预设的映射关系对照匹配所述表情特征数据以确定情感指数;基于所述文本特征数据、所述情感指数和所述话题特征数据对所述多媒体数据进行渲染。基于此,本专利技术通过对多人商谈通话的多媒体信息进行解析提取、智能分析和渲染增强,在现有通话产品的语音和视频的基础上,挖掘出多维度的价值信息,包括语音文本、情感指数,并且将语音文本的内容根据预设的映射关系进一步二次加工,使得通话产品能够呈现更丰富智能的信息,同时,通过预设不同的映射关系,能够灵活的处理不同的商务场景和会谈内容,扩展技术方案的应用领域,可以有效的挖掘通话类产品的潜在价值,给通话商谈带来全新的体验,增加商谈业务使用者的会谈竞争力,提高决策效率,赢得更多的话语权,有效抓住商机。

8、本专利技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

本文档来自技高网
...

【技术保护点】

1.一种多媒体数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述映射关系包括如下至少之一:

3.根据权利要求2所述的方法,其特征在于,所述解析所述音频流,得到文本特征数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述解析所述视频流,得到表情特征数据,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据预设的映射关系对照匹配所述表情特征数据以确定情感指数,包括:

6.根据权利要求3所述的方法,其特征在于,所述根据预设的映射关系对照匹配所述文本特征数据以确定话题特征数据,包括:

7.根据权利要求6所述的方法,其特征在于,所述依据对应的所述场景模板,对所述字幕文本、所述字幕附加文本进行深层处理获得话题特征数据,包括:

8.根据权利要求7所述的方法,其特征在于,所述执行所述命令序列,获得话题特征数据,包括如下至少之一:

9.根据权利要求4至8任一所述的方法,其特征在于,所述基于所述文本特征数据、所述情感指数和所述话题特征数据对所述多媒体数据进行渲染,包括:

10.根据权利要求9所述的方法,其特征在于,所述渲染集的配置,包括如下至少之一:

11.一种多媒体数据处理装置,包括:

12.一种电子设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至10中任意一项所述的多媒体数据处理方法。

13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机可执行程序,所述计算机可执行程序用于使计算机执行如权利要求1至10任意一项所述的多媒体数据处理方法。

...

【技术特征摘要】

1.一种多媒体数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述映射关系包括如下至少之一:

3.根据权利要求2所述的方法,其特征在于,所述解析所述音频流,得到文本特征数据,包括:

4.根据权利要求3所述的方法,其特征在于,所述解析所述视频流,得到表情特征数据,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据预设的映射关系对照匹配所述表情特征数据以确定情感指数,包括:

6.根据权利要求3所述的方法,其特征在于,所述根据预设的映射关系对照匹配所述文本特征数据以确定话题特征数据,包括:

7.根据权利要求6所述的方法,其特征在于,所述依据对应的所述场景模板,对所述字幕文本、所述字幕附加文本进行深层处理获得话题特征数据,包括:

8.根据权利要求7所...

【专利技术属性】
技术研发人员:惠羿
申请(专利权)人:中兴通讯股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1