一种多媒体信息处理方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术公开了一种多媒体信息处理方法、装置、电子设备及存储介质，该方法包括：获取多媒体信息；对所述多媒体信息进行处理，得到处理结果；将所述多媒体信息和所述处理结果发送至车辆的座舱域控制器，由所述座舱域控制器根据所述多媒体信息和所述处理结果，确定并展示控制结果。本发明专利技术采用智能协处理器和座舱域控制器的分体式设计，以较低的芯片成本提高了多媒体信息处理的效率，从而满足如今逐渐丰富的人机交互应用场景。机交互应用场景。机交互应用场景。

【技术实现步骤摘要】
一种多媒体信息处理方法、装置、电子设备及存储介质


[0001]本专利技术涉及智能驾驶
，特别涉及一种多媒体信息处理方法、装置、电子设备及存储介质。

技术介绍

[0002]车载智能座舱系统作为人车交互的入口，为用户提供智能和安全的驾乘体验。随着视觉AI技术的发展，智能座舱域控制器基于外接摄像头的功能越来越多：驾驶员监控、成员监控、感知360、手势识别等。这些功能的日益丰富，意味着对座舱域控制器处理能力的要求越来越高，目前一体式座舱域控制器的发展已经跟不上功能需求的快速增加。

技术实现思路

[0003]为了解决现有技术的问题，本专利技术实施例提供了一种多媒体信息处理方法、装置、电子设备及存储介质。所述技术方案如下：
[0004]一方面，提供了一种多媒体信息处理方法，应用于车辆的智能协处理器，所述方法包括：
[0005]获取车载多媒体采集模块采集的多媒体信息；
[0006]对多媒体信息进行处理，得到处理结果；
[0007]将多媒体信息和处理结果发送至车辆的座舱域控制器，由座舱域控制器根据多媒体信息和处理结果，确定并展示控制结果。
[0008]另一方面，提供了一种多媒体信息处理装置，应用于车辆的智能协处理器，所述装置包括：
[0009]获取模块，用于获取车载多媒体采集模块采集的多媒体信息；
[0010]处理模块，用于对多媒体信息进行处理，得到处理结果；
[0011]发送模块，用于将多媒体信息和处理结果发送至车辆的座舱域控制器，由座舱域控制器根据多媒体信息和处理结果，确定并展示控制结果。
[0012]在一个示例性的实施方式中，所述处理模块具体用于：
[0013]将多媒体信息输入到意图识别模型进行意图识别处理，得到意图识别结果。
[0014]在一个示例性的实施方式中，多媒体信息包括视频信息和/或音频信息,所述获取模块包括：
[0015]视频接收模块，用于接收由外设摄像头模块采集的视频信息；
[0016]音频接收模块，用于接收由外设麦克风模块采集的音频信息；其中，外设摄像头模块和外设麦克风模块分别与车载多媒体采集模块连接。
[0017]在一个示例性的实施方式中，所述发送模块具体用于：
[0018]通过预设视频通道，将视频信息发送至座舱域控制器内的视频接收模块；
[0019]通过第一传输接口，将音频信息和处理结果发送至座舱域控制器。
[0020]另一方面，提供了另一种多媒体信息处理方法，应用于车辆的座舱域控制器，所述
方法包括：
[0021]接收车辆的智能协处理器所发送的多媒体信息和处理结果；
[0022]根据多媒体信息和处理结果，确定并展示控制结果；其中，处理结果是智能协处理器获取车载多媒体采集模块采集的多媒体信息，对多媒体信息进行处理得到的。
[0023]另一方面，提供了另一种多媒体信息处理装置，应用于车辆的座舱域控制器，所述装置包括：
[0024]接收模块，用于接收车辆的智能协处理器所发送的多媒体信息和处理结果；
[0025]确定模块，用于根据多媒体信息和处理结果，确定并展示控制结果；其中，处理结果是智能协处理器获取车载多媒体采集模块采集的多媒体信息，对多媒体信息进行处理得到的。
[0026]在一个示例性的实施方式中，多媒体信息包括视频信息和/或音频信息,所述接收模块具体用于：
[0027]通过视频通道对接模块，接收智能协处理器通过预设视频通道发送的视频信息；
[0028]通过第二传输接口，接收智能协处理器通过第一传输接口发送的音频信息和处理结果。
[0029]在一个示例性的实施方式中，所述确定模块包括：
[0030]解析模块，用于按照预设格式对多媒体信息和处理结果分别进行解析，得到解析后的多媒体信息和处理结果；
[0031]控制结果生成模块，用于根据解析后的多媒体信息和处理结果，生成控制结果；
[0032]展示模块，用于展示控制结果。
[0033]另一方面，提供了一种电子设备，包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现上述多媒体信息处理方法。
[0034]另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由处理器加载并执行以实现如上述的多媒体信息处理方法。
[0035]另一方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该电子设备执行上述各方面中提供的多媒体信息处理方法。
[0036]本专利技术实施例通过应用于车辆的智能协处理器，获取车载多媒体采集模块采集的多媒体信息；对所述多媒体信息进行处理，得到处理结果；将所述多媒体信息和所述处理结果发送至车辆的座舱域控制器，由所述座舱域控制器根据所述多媒体信息和所述处理结果，确定并展示控制结果，在现有座舱域控制器的基础上连接智能协处理器，不用改变座舱域控制器芯片平台设计便能弥补座舱域控制器在多媒体信息方面计算能力的不足，从而实现了灵活扩展座舱域控制器的计算能力。这种分体式设计，以较低的芯片成本和芯片能力实现了对计算处理能力有要求的多媒体功能需求，拓展了人机交互的应用场景，丰富了乘客的乘坐体验。
附图说明
[0037]为了更清楚地说明本专利技术实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0038]图1是本专利技术实施例提供的一种多媒体信息处理方法的架构示意图；
[0039]图2是本专利技术实施例提供的一种多媒体信息处理方法的流程示意图；
[0040]图3是本专利技术实施例提供的另一种多媒体信息处理方法的流程示意图；
[0041]图4是本专利技术实施例提供的另一种多媒体信息处理方法的流程示意图；
[0042]图5是本专利技术实施例提供的一种多媒体信息处理装置的结构框图；
[0043]图6是本专利技术实施例提供的另一种多媒体信息处理装置的结构框图；
[0044]图7是本专利技术实施例提供的一种终端的硬件结构框图。
具体实施方式
[0045]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0046]需要说明的是，本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多媒体信息处理方法，其特征在于，应用于车辆的智能协处理器，所述方法包括：获取车载多媒体采集模块采集的多媒体信息；对所述多媒体信息进行处理，得到处理结果；将所述多媒体信息和所述处理结果发送至所述车辆的座舱域控制器，由所述座舱域控制器根据所述多媒体信息和所述处理结果，确定并展示控制结果。2.根据权利要求1所述的多媒体信息处理方法，其特征在于，所述对所述多媒体信息进行处理，得到处理结果，包括：将所述多媒体信息输入到意图识别模型进行意图识别处理，得到意图识别结果。3.根据权利要求1所述的多媒体信息处理方法，其特征在于，所述多媒体信息包括视频信息和/或音频信息；所述获取车载多媒体采集模块采集的多媒体信息，包括：接收由外设摄像头模块采集的视频信息；和/或接收由外设麦克风模块采集的音频信息；其中，所述外设摄像头模块和所述外设麦克风模块分别与所述车载多媒体采集模块连接。4.根据权利要求3所述的多媒体信息处理方法，其特征在于，所述将所述多媒体信息和所述处理结果发送至所述车辆的座舱域控制器，包括：通过预设视频通道，将所述视频信息发送至所述座舱域控制器内的视频接收模块；和/或通过第一传输接口，将所述音频信息和所述处理结果发送至所述座舱域控制器。5.一种多媒体信息处理方法，其特征在于，应用于车辆的座舱域控制器，所述方法包括：接收车辆的智能协处理器所发送的多媒体信息和处理结果；根据所述多媒体信息和所述处理结果，确定并展示控制结果；其中，所述处理结果是所述智能协处理器获取车载多媒体采集模块采集的多媒体信息，对所述多媒体信息进行处理得到的。6.根据权利要求5所述的多媒体信息处理方法，其特征在于，所述多媒体信息包括视频信息和/或音频信息；所述接收车辆的智能协处理器所发送的多媒体信息和处理结果，包括：通过视频通道对接模块，接收所述智能协处理器通...

【专利技术属性】
技术研发人员：徐浩，季栋辉，于波，
申请(专利权)人：中汽创智科技有限公司，
类型：发明
国别省市：