基于XR设备的用户信息处理方法、装置、设备及介质制造方法及图纸

技术编号:46359793 阅读:5 留言:0更新日期:2025-09-15 12:38
本发明专利技术公开了基于XR设备的用户信息处理方法、装置、设备及介质,是获取当前用户图像;基于人脸识别模型对其进行识别,得到当前用户识别结果;若确定其属于特定用户信息集,则获取当前用户提示信息,并在XR设备的显示模块中显示;获取基于当前用户提示信息采集到的用户沟通语音数据,且对其进行语音识别,得到当前语音识别结果;若检测到文本处理指令,则基于自然语言处理模型对当前语音识别结果进行文本摘要或自动总结处理,得到当前文本处理结果。本发明专利技术实施例能使得XR设备的佩戴用户及时对沟通对象进行用户图像识别和语音识别,不仅能对沟通对象的用户信息进行快速获取,还能对沟通过程中所需的引导提示信息进行快速获取及直观展示。

【技术实现步骤摘要】

本专利技术涉及混合现实,尤其涉及基于xr设备的用户信息处理方法、装置、设备及介质。


技术介绍

1、目前,xr设备(xr全称是extended reality,表示扩展现实,是虚拟现实、增强现实、混合现实等技术的混合技术)在日常生活中得到了越来越多的应用。例如,若用户佩戴有xr设备(如xr眼镜),可以作为与他人沟通时进行翻译的辅助设备;还例如,用户可通过xr眼镜的镜片显示导航信息,以引导用户到达目的地。但是,目前xr设备还未在医院这一场景下进行具体应用,也就未有效综合利用xr设备的图像采集、语音采集、信息展示、语音识别及图像识别等功能,医生、护士等用户也就无法及时的获取到患者的相关信息以进行后续的沟通、引导等操作。


技术实现思路

1、本专利技术实施例提供了基于xr设备的用户信息处理方法、装置、设备及介质,旨在解决现有技术中xr设备还未在医院这一场景下进行具体应用,未有效综合利用xr设备的图像采集、语音采集、信息展示、语音识别及图像识别等功能,医生、护士等用户也就无法及时的获取到患者的相关信息以进行后续的沟通、引本文档来自技高网...

【技术保护点】

1.一种基于XR设备的用户信息处理方法,应用于XR设备,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,若确定所述当前用户识别结果属于预设的特定用户信息集,则获取与所述当前用户识别结果对应的当前用户提示信息,包括:

3.根据权利要求2所述的方法,其特征在于,在所述获取基于所述当前用户提示信息对应采集到的用户沟通语音数据的步骤之前,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,在所述基于已部署的语音识别模型对所述当前沟通语音数据进行语音识别,得到当前语音识别结果的步骤之后,所述方法还包括:

5.根据权利要求2所述的...

【技术特征摘要】

1.一种基于xr设备的用户信息处理方法,应用于xr设备,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,若确定所述当前用户识别结果属于预设的特定用户信息集,则获取与所述当前用户识别结果对应的当前用户提示信息,包括:

3.根据权利要求2所述的方法,其特征在于,在所述获取基于所述当前用户提示信息对应采集到的用户沟通语音数据的步骤之前,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,在所述基于已部署的语音识别模型对所述当前沟通语音数据进行语音识别,得到当前语音识别结果的步骤之后,所述方法还包括:

5.根据权利要求2所述的方法,其特征在于,在所述基于已部署的语音识别模型对所述当前沟通语音数据进行语音识别,得到当前语音识别结果的步骤之后,所述方法还包括:

6.根据权利要求1所述的方法,其特征在于,在所述若检测到文本处理指令,则...

【专利技术属性】
技术研发人员:邵鹤亭杨文王银河
申请(专利权)人:艾大力科技杭州有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1