智能应答树的验证方法、装置、设备和存储介质制造方法及图纸

技术编号:34469421 阅读:12 留言:0更新日期:2022-08-10 08:43
本公开提供一种智能应答树的验证方法、装置、设备和存储介质,所述方法包括:获取人机交互场景下的用户提问数据对应的智能应答树的树标识;根据所述树标识查找所述智能应答树在实验空间中对应的实验版本的实验版本标识;以所述层标识和待路由实验流量的流量标识作为哈希函数的输入参数进行哈希分桶,得到哈希分桶结果;根据哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系;根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本。本公开的技术方案可以降低实验配置复杂性和软件开发工作量。低实验配置复杂性和软件开发工作量。低实验配置复杂性和软件开发工作量。

【技术实现步骤摘要】
智能应答树的验证方法、装置、设备和存储介质


[0001]本公开涉及计算机
,尤其涉及一种智能应答树的验证方法、装置、电子设备和非暂态计算机可读存储介质。

技术介绍

[0002]在面对C端用户的产品界面功能设计中,需要引入AB验证工具来收集和验证C端用户对不同设计的体验反馈,从而辅助产品设计或运营人员做出正确的选择。
[0003]在智能机器人的日常运营中,一个智能应答树可以有多个版本,运营可通过对智能应答树的多个版本进行创建、测试、上线,在实现运营的自主运营的同时优化提升智能应答树以保障日常运营稳定性。
[0004]在日常运营中,可以使用AB实验对智能机器人训练师的优化方案进行验证。具体地,可以将多个版本的智能应答树同时加载到系统中,将提问数据通过哈希分流随机路由到实验版本,再通过数据统计分析不同版本的指标数据来判定优化方案是否有效提升机器人的指标数据。
[0005]在对智能机器人的优化方案进行验证时,AB实验配置过程较为复杂,需要手动配置诸多参数,并且AB实验分流代码的开发和验证的工作量较大。

技术实现思路

[0006]本公开提供一种智能应答树的验证方法、装置、电子设备和非暂态计算机可读存储介质,用以解决现有技术中AB实验操作繁琐的问题,提高对智能应答树进行验证的便捷性。
[0007]本公开提供一种智能应答树的验证方法,包括:获取人机交互场景下的用户提问数据对应的智能应答树的树标识;根据所述树标识查找所述智能应答树在实验空间中对应的实验版本的实验版本标识,其中,所述实验空间中设置有多个层,每个层中包括一个实验,每个实验包括至少两个实验版本,每个所述层具有唯一的层标识,每个所述实验版本具有唯一的实验版本标识;以所述层标识和待路由实验流量的流量标识作为哈希函数的输入参数进行哈希分桶,得到哈希分桶结果;根据所述哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系,其中,所述第一对应关系是预先设置的所述哈希分桶的桶序号与同一个层中的实验版本的实验版本标识的对应关系;根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本。
[0008]根据本公开提供的智能应答树的验证方法,所述根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本之后,所述方法还包括:获取采用不同实验版本对对应的实验流量进行验证得到的指标数据;根据所述指标数据获取所述智能应答树的验证结果。
[0009]根据本公开提供的智能应答树的验证方法,所述层包括单层或公共层,每个所述单层与一个智能应答树对应,每个所述公共层与至少一个智能应答树关联。
[0010]根据本公开提供的智能应答树的验证方法,所述层为公共层,所述根据所述树标识查找所述智能应答树在实验空间中对应的实验版本,包括:根据所述树标识查找所述智能应答树在实验空间中对应的层和实验,得到查找结果;根据所述查找结果获取第一键值对,其中,所述第一键值对中的键为树标识,对应的值为所述树标识对应的实验版本标识;根据所述第一键值对获取所述实验版本的实验版本标识。
[0011]根据本公开提供的智能应答树的验证方法,在所述第一对应关系中,每个实验版本标识与预先设置的不同数值范围的所述哈希分桶的桶序号对应,每个所述桶序号均对应有实验版本标识;所述根据哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系之前,所述方法还包括:获取预先配置的配置数据;根据所述配置数据确定所述实验版本标识与所述不同数值范围的第二对应关系;根据所述第二对应关系获取所述第一对应关系。
[0012]根据本公开提供的智能应答树的验证方法,所述根据哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系之前,所述方法还包括:获取所述用户提问数据对应的意图库的第一库标识;根据所述第一库标识查找所意图库在实验空间中对应的实验版本的实验版本标识。
[0013]根据本公开提供的智能应答树的验证方法,所述根据哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系之前,所述方法还包括:获取所述用户提问数据对应的任务库的第二库标识;根据所述第二库标识查找所意图库在实验空间中对应的实验版本的实验版本标识。
[0014]根据本公开提供的一种智能应答树的验证装置,所述装置包括:获取单元,用于获取人机交互场景下的用户提问数据对应的智能应答树的树标识;查找单元,用于根据所述树标识查找所述智能应答树在实验空间中对应的实验版本的实验版本标识,其中,所述实验空间中设置有多个层,每个层中包括一个实验,每个实验包括至少两个实验版本,每个所述层具有唯一的层标识,每个所述实验版本具有唯一的实验版本标识;哈希单元,用于以所述层标识和待路由实验流量的流量标识作为哈希函数的输入参数进行哈希分桶,得到哈希分桶结果;匹配单元,用于根据所述哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系,其中,所述第一对应关系是预先设置的所述哈希分桶的桶序号与同一个层中的实验版本的实验版本标识的对应关系;路由单元,用于根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本。
[0015]根据本公开提供的智能应答树的验证装置,所述装置还包括验证单元,用于:获取采用不同实验版本对对应的实验流量进行验证得到的指标数据;根据所述指标数据获取所述智能应答树的验证结果。
[0016]根据本公开提供的智能应答树的验证装置,所述层包括单层或公共层,每个所述单层与一个智能应答树对应,每个所述公共层与至少一个智能应答树关联。
[0017]根据本公开提供的智能应答树的验证装置,所述层为公共层,所述查找单元还用于:根据所述树标识查找所述智能应答树在实验空间中对应的层和实验,得到查找结果;根据所述查找结果获取第一键值对,其中,所述第一键值对中的键为树标识,对应的值为所述树标识对应的实验版本标识;根据所述第一键值对获取所述实验版本的实验版本标识。
[0018]根据本公开提供的智能应答树的验证装置,在所述第一对应关系中,每个实验版
本标识与预先设置的不同数值范围的所述哈希分桶的桶序号对应,每个所述桶序号均对应有实验版本标识;所述装置还用于:获取预先配置的配置数据;根据所述配置数据确定所述实验版本标识与所述不同数值范围的第二对应关系;根据所述第二对应关系获取所述第一对应关系。
[0019]根据本公开提供的智能应答树的验证装置,所述装置还用于:获取所述用户提问数据对应的意图库的第一库标识;根据所述第一库标识查找所意图库在实验空间中对应的实验版本的实验版本标识。
[0020]根据本公开提供的智能应答树的验证装置,所述装置还用于:获取所述用户提问数据对应的任务库的第二库标识;根据所述第二库标识查找所意图库在实验空间中对应的实验版本的实验版本标识。
[0021]本公开还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述智能应答树的验证方法的步骤。...

【技术保护点】

【技术特征摘要】
1.一种智能应答树的验证方法,其特征在于,所述方法包括:获取人机交互场景下的用户提问数据对应的智能应答树的树标识;根据所述树标识查找所述智能应答树在实验空间中对应的实验版本的实验版本标识,其中,所述实验空间中设置有多个层,每个层中包括一个实验,每个实验包括至少两个实验版本,每个所述层具有唯一的层标识,每个所述实验版本具有唯一的实验版本标识;以所述层标识和待路由实验流量的流量标识作为哈希函数的输入参数进行哈希分桶,得到哈希分桶结果;根据所述哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系,其中,所述第一对应关系是预先设置的所述哈希分桶的桶序号与同一个层中的实验版本的实验版本标识的对应关系;根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本。2.根据权利要求1所述的方法,其特征在于,所述根据所述匹配关系将所述待路由的实验流量路由到对应的实验版本之后,所述方法还包括:获取采用不同实验版本对对应的实验流量进行验证得到的指标数据;根据所述指标数据获取所述智能应答树的验证结果。3.根据权利要求1所述的方法,其特征在于,所述层包括单层或公共层,每个所述单层与一个智能应答树对应,每个所述公共层与至少一个智能应答树关联。4.根据权利要求3所述的方法,其特征在于,所述层为公共层,所述根据所述树标识查找所述智能应答树在实验空间中对应的实验版本,包括:根据所述树标识查找所述智能应答树在实验空间中对应的层和实验,得到查找结果;根据所述查找结果获取第一键值对,其中,所述第一键值对中的键为树标识,对应的值为所述树标识对应的实验版本标识;根据所述第一键值对获取所述实验版本的实验版本标识。5.根据权利要求1所述的方法,其特征在于,在所述第一对应关系中,每个实验版本标识与预先设置的不同数值范围的所述哈希分桶的桶序号对应,每个所述桶序号均对应有实验版本标识;所述根据哈希分桶结果和第一对应关系得到待路由的实验流量与实验版本标识的匹配关系之前,所述方法还包括:获取预先配置的配置数据;根据所述配...

【专利技术属性】
技术研发人员:潘强陈鹏
申请(专利权)人:京东科技信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1