交互方法、装置和设备制造方法及图纸

本申请公开了一种交互方法、装置和设备；所述方法包括：响应于接收到出行导航指令，获取出行地点信息；基于所述出行地点信息和第一多模对话模型，生成第一问询信息，所述第一多模对话模型基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征训练生成，所述至少一个用户包括第一用户；获取所述第一用户的第一应答信息；基于所述第一应答信息和所述第一多模对话模型，生成第二问询信息，并返回执行所述获取所述第一用户的第一应答信息的步骤，直至满足对话结束条件。束条件。束条件。

【技术实现步骤摘要】
交互方法、装置和设备


[0001]本申请涉及车辆
，尤其涉及一种交互方法、装置和设备。

技术介绍

[0002]相关技术中，车辆设计主要出于减少生理负担的考虑，集中在硬件设计，如安全带、座椅等；少见出于安全需求或生理健康需求的软件设计。

技术实现思路

[0003]基于以上问题，本申请实施例提供了一种交互方法、装置、设备和存储介质。
[0004]本申请实施例提供的技术方案是这样的：
[0005]本申请实施例首先提供了一种交互方法，所述方法包括：
[0006]响应于接收到出行导航指令，获取出行地点信息；基于所述出行地点信息和第一多模对话模型，生成第一问询信息，所述第一多模对话模型基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征训练生成，所述至少一个用户包括第一用户；获取所述第一用户的第一应答信息；基于所述第一应答信息和所述第一多模对话模型，生成第二问询信息，并返回执行所述获取所述第一用户的第一应答信息的步骤，直至满足对话结束条件。
[0007]本申请实施例还提供了一种交互装置，所述装置包括：
[0008]第一获取模块，用于响应于接收到出行导航指令，获取出行地点信息；第一生成模块，用于基于所述出行地点信息和第一多模对话模型，生成第一问询信息，所述第一多模对话模型基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征训练生成，所述至少一个用户包括第一用户；第二获取模块，用于获取所述第一用户的第一应答信息；第二生成模块，用于基于所述第一应答信息和所述第一多模对话模型，生成第二问询信息，并返回执行所述获取所述第一用户的第一应答信息的步骤，直至满足对话结束条件。
[0009]本申请实施例还提供了一种电子设备，所述设备包括存储器和处理器，所述存储器存储有可在处理器上运行的计算机程序，所述处理器执行所述程序时实现本申请实施例所述交互方法中的步骤。
[0010]本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现本申请实施例所述交互方法中的步骤。
[0011]本申请实施例中，在用户出行时，经过训练的第一多模对话模型，可以根据用户的出行地点和应答信息，生成与出行地点和个人信息相关、且符合用户言语特征的问询语句，从而可以使得用户和车辆之间的交互内容更符合出行主题，更具有个性化，提升用户在驾车出行过程中对休闲娱乐、心理健康的需求。
附图说明
[0012]图1为本申请实施例一种交互方法的流程示意图；
[0013]图2为本申请实施例另一种交互方法的流程示意图；
[0014]图3为本申请实施例又一种交互方法的流程示意图；
[0015]图4为本申请实施例再一种交互方法的流程示意图；
[0016]图5为本申请实施例还一种交互方法的流程示意图；
[0017]图6为本申请实施例还一种交互方法的流程示意图；
[0018]图7为本申请实施例还一种交互方法的流程示意图；
[0019]图8为本申请实施例还一种交互方法的流程示意图；
[0020]图9为本申请实施例一种对话系统开发和应用的流程示意图；
[0021]图10为本申请实施例一种交互装置的组成结构示意图；
[0022]图11为本申请实施例一种电子设备的结构示意图。
具体实施方式
[0023]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。
[0024]图1为本申请实施例一种交互方法的流程示意图，如图1所示，所述方法可以应用于所述车辆的车载控制器，包括以下步骤：
[0025]步骤102：响应于接收到出行导航指令，获取出行地点信息；
[0026]其中，车载控制器接收到用户在用户操作界面的导航操作，可以将所述导航操作转化为出行导航指令，对出行导航指令进行解析，得到出行目的地信息，即出行地点信息，例如某个大学、公司或者旅游景点。
[0027]步骤104：基于所述出行地点信息和第一多模对话模型，生成第一问询信息，所述第一多模对话模型基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征训练生成，所述至少一个用户包括第一用户；
[0028]其中，所述主体信息可以是和所述出行地点相关的信息，所述用户的言语特征可以包括所述用户的讲话特点以及使用的语言等，所述讲话的特点可以包括语速、语调、语气和语言的逻辑性等，所述使用的语言可以包括某个国家的语言或者某个地区的方言等；可以将出行地点信息输入训练完成的第一多模对话模型，由第一多模对话模型输出和出行地点信息中包含的目的地相关的首轮问询信息，即第一问询信息。
[0029]步骤106：获取所述第一用户的第一应答信息；
[0030]需要说明的是，可预先将多个用户的声纹信息录入声纹库中，通过根据获取到的第一应答信息，将第一应答信息对应的声纹信息与声纹库中多个用户的声纹信息进行对比，以对用户的声音进行声纹识别，识别用户身份，若识别结果表征识别出的声纹信息与第一用户相对应，则表示是第一用户在与车辆进行交互。
[0031]步骤108：基于所述第一应答信息和所述第一多模对话模型，生成第二问询信息，并返回执行所述获取所述第一用户的第一应答信息的步骤，直至满足对话结束条件。
[0032]其中，所述第一多模对话模型可以是利用多轮模型问询信息和每轮模型问询信息对应的用户应答信息进行训练得到的，可以将所述第一应答信息输入所述第一多模对话模
型，由所述第一多磨对话模型输出与所述第一应答信息对应的第二问询信息。
[0033]其中，用户再次问询，车载控制器可以基于用户回复的第二问询信息与用户持续进行多轮对话，所述对话结束条件可以是指对话终止的条件，例如用户在一段时间内无应答。
[0034]本申请实施例中，在用户出行时，经过训练的第一多模对话模型，可以根据用户的出行地点和应答信息，生成与出行地点和个人信息相关、且符合用户言语特征的问询语句，从而可以使得用户和车辆之间的交互内容更符合出行主题，更具有个性化，提升用户在驾车出行过程中对休闲娱乐、心理健康的需求。
[0035]在一些实施例中，如图2所示，所述第一问询信息包括第一问询语句和所述第一问询语句对应的第一图像；所述第二问询信息包括第二问询语句和所述第二问询语句对应的第二图像；
[0036]其中，第一应答信息可以是用户的应答语音，问询信息中可以包括问询语句和图像，即问询信息为语音和图像双模态，需要说明的是，在一些实施例中，所述问询信息还可以是文本和图像双模态，或者语音和文本双模态，还可以是语音、图像和文本三模态，即问询信息可以是语音、图像和文本中的至少两个模态；每个模态包含的信息不同，文本模态可以包括基本的语言符号、句法和语言动作等，语音模态包括语音、语调以及声音表达等，图像模态包括姿态特征、身体语言、眼神以及面部表达等信息。...

【技术保护点】

【技术特征摘要】
1.一种交互方法，其特征在于，所述方法包括：响应于接收到出行导航指令，获取出行地点信息；基于所述出行地点信息和第一多模对话模型，生成第一问询信息，所述第一多模对话模型基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征训练生成，所述至少一个用户包括第一用户；获取所述第一用户的第一应答信息；基于所述第一应答信息和所述第一多模对话模型，生成第二问询信息，并返回执行所述获取所述第一用户的第一应答信息的步骤，直至满足对话结束条件。2.根据权利要求1所述的方法，其特征在于，所述第一问询信息包括第一问询语句和所述第一问询语句对应的第一图像；所述第二问询信息包括第二问询语句和所述第二问询语句对应的第二图像；所述方法还包括：对所述第一图像或所述第二图像进行编辑处理。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：基于所述第一应答信息，对所述第一多模对话模型的主题信息和个人信息进行更新，得到更新后的多模对话模型；获取所述第一用户的第二应答信息；基于所述第二应答信息和所述更新后的多模对话模型，生成第三问询信息，并返回执行所述获取所述第一用户的第二应答信息的步骤，直至满足所述对话结束条件。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：基于生成式预训练变换器GPT模型，构建初始多模对话模型，所述GPT模型至少满足图像和文本双模态对话；基于所述出行地点信息对应的主题信息、至少一个用户的个人信息和每一所述用户的言语特征，生成多轮训练对话信息，每轮所述训练对话信息中包括模型问询信息和用户应答信息；基于所述多轮训练对话信息，对所述初始多模对话模型进行训练，得到所述第一多模对话模型。5.根据权利要求4所述的方法，其特征在于，所述响应于接收到出行导航指令，获取出行地点信息，包括：响应于接收到出行导航指令，获取出行地点信息和出行场景；所述基于所述出行地点信息和第一多模对话模型，生成第一问询信息，包括：基于所述出行地点信息和所述出行场景对应的第一多模对话模型，生成第一问询信息，所述第一多...

【专利技术属性】
技术研发人员：周俊邑，严立康，贺维鲁，康操，
申请(专利权)人：阿维塔科技重庆有限公司，
类型：发明
国别省市：