温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。
本发明实施例公开了一种预训练语言模型的构建方法、装置、电子终端及存储介质,该方法包括:获取对话数据;根据各预训练任务的任务要求对对话数据进行处理,得到训练数据以及训练数据在各预训练任务下的标签数据;各预训练任务包括:全词掩码预测任务、角色预...该专利属于上海浦东发展银行股份有限公司所有,仅供学习研究参考,未经过上海浦东发展银行股份有限公司授权不得商用。
温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。
本发明实施例公开了一种预训练语言模型的构建方法、装置、电子终端及存储介质,该方法包括:获取对话数据;根据各预训练任务的任务要求对对话数据进行处理,得到训练数据以及训练数据在各预训练任务下的标签数据;各预训练任务包括:全词掩码预测任务、角色预...