语音辅助方法、装置、终端设备以及存储介质制造方法及图纸

技术编号:36752748 阅读:13 留言:0更新日期:2023-03-04 10:41
本发明专利技术公开了一种语音辅助方法、装置、终端设备以及存储介质,通过响应于使用者的指令信息,启动指令信息对应的服务模式;若服务模式为盲道探测,则生成第一语音信息,用于引导使用者执行预设动作;在使用者执行预设动作时,通过摄像头采集图像数据,并基于探测模型对图像数据进行处理,得到行进方案,生成第二语音信息,用于引导使用者执行行进动作;在使用者执行行进动作时,获取使用者的运动状态信息及当前道路信息,基于运动状态信息及当前道路信息生成第三语音信息,用于为使用者提供道路指引。通过响应使用者的指令信息,引导使用者执行行进动作,实时生成语音信息,为使用者提供全面且及时的道路指引,从而实现指引盲人安全出行。安全出行。安全出行。

【技术实现步骤摘要】
语音辅助方法、装置、终端设备以及存储介质


[0001]本专利技术涉及智能穿戴设备领域,尤其涉及语音辅助方法、装置、终端设备以及存储介质。

技术介绍

[0002]盲人是指视觉有障碍的人,盲人的活动会因视觉障碍受到限制。当盲人外出时,他们对于外界环境的观察,几乎完全靠自己身体的触碰,从而在出行上有严重安全隐患。随着社会的发展,城市建设在盲道上不断完善,如何指引盲人使用盲道出行便显得由为重要。
[0003]因此,有必要提出一种指引盲人安全出行的解决方案。

技术实现思路

[0004]本专利技术的主要目的在于提供一种语音辅助方法、装置、终端设备以及存储介质,旨在指引盲人安全出行。
[0005]为实现上述目的,本专利技术提供一种语音辅助方法,所述语音辅助方法包括:
[0006]响应于使用者的指令信息,启动所述指令信息对应的服务模式;
[0007]若所述服务模式为盲道探测,则生成第一语音信息,用于引导所述使用者执行预设动作;
[0008]在所述使用者执行预设动作时,通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案;
[0009]根据所述行进方案,生成第二语音信息,用于引导所述使用者执行行进动作;
[0010]在所述使用者执行行进动作时,获取所述使用者的运动状态信息及当前道路信息,基于所述运动状态信息及当前道路信息生成第三语音信息,用于为所述使用者提供道路指引。
[0011]可选地,所述服务模式还包括语音助手,所述响应于使用者的指令信息,启动所述指令信息对应的服务模式的步骤之后还包括:
[0012]若所述服务模式为语音助手,则通过麦克风采集所述使用者的语音声波;
[0013]将所述语音声波与系统数据库中的各功能声波进行匹配,得到所述语音声波对应的功能声波;
[0014]基于所述对应的功能声波产生对应的系统指令,并根据所述系统指令启动对应功能。
[0015]可选地,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案的步骤之前还包括:
[0016]采集相关图像数据集;
[0017]对所述相关图像数据集中的盲道信息进行标记,得到探测模型数据库;
[0018]基于所述探测模型数据库建立所述探测模型。
[0019]可选地,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据
进行处理,得到行进方案的步骤包括:
[0020]通过所述摄像头采集预设方向的图像数据;
[0021]基于所述探测模型对所述图像数据中的可疑盲道数据进行标记,得到标记数据;
[0022]基于所述探测模型数据库对所述标记数据进行识别,判断所述标记数据中是否包括特征数据;
[0023]若所述标记数据中包括所述特征数据,则通过所述探测模型中的方位算法计算盲道相对位置,其中,所述盲道相对位置包括盲道方位及盲道距离;
[0024]基于所述盲道相对位置生成所述行进方案。
[0025]可选地,所述获取所述使用者的运动状态信息及当前道路信息的步骤包括:
[0026]通过传感器模块获取所述运动状态信息;
[0027]通过所述摄像头采集所述当前道路信息。
[0028]可选地,所述基于所述运动状态信息及当前道路信息生成第三语音信息的步骤包括:
[0029]基于所述探测模型对所述当前道路信息进行识别,得到当前盲道类型;
[0030]根据所述运动状态信息及所述当前盲道类型,生成所述第三语音信息。
[0031]可选地,所述当前盲道类型包括带导砖和/或提醒砖,所述第三语音信息包括直行语音提醒和/或转弯语音提醒,包括所述根据所述运动状态信息及所述当前盲道类型,生成所述第三语音信息的步骤包括:
[0032]若所述当前盲道类型为带导砖,则结合所述运动状态信息生成所述直行语音提醒;
[0033]若所述当前盲道类型为提醒砖,则结合所述运动状态信息生成所述转弯语音提醒。
[0034]此外,为实现上述目的,本专利技术还提供一种语音辅助装置,所述语音辅助装置包括:
[0035]响应模块,用于响应于使用者的指令信息,启动所述指令信息对应的服务模式;
[0036]引导模块,若所述服务模式为盲道探测,则用于生成第一语音信息,用于引导所述使用者执行预设动作;
[0037]处理模块,用于在所述使用者执行预设动作时,通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案;
[0038]生成模块,用于根据所述行进方案,生成第二语音信息,用于引导所述使用者执行行进动作;
[0039]指引模块,用于在所述使用者执行行进动作时,获取所述使用者的运动状态信息及当前道路信息,基于所述运动状态信息及当前道路信息生成第三语音信息,用于为所述使用者提供道路指引。
[0040]此外,为实现上述目的,本专利技术还提供一种终端设备,所述终端设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的语音辅助程序,所述语音辅助程序被所述处理器执行时实现如上所述的语音辅助方法的步骤。
[0041]此外,为实现上述目的,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有语音辅助程序,所述语音辅助程序被处理器执行时实现如上所述的语音
辅助方法的步骤。
[0042]本专利技术实施例提出的一种语音辅助方法、装置、终端设备以及存储介质,通过响应于使用者的指令信息,启动所述指令信息对应的服务模式;若所述服务模式为盲道探测,则生成第一语音信息,用于引导所述使用者执行预设动作;在所述使用者执行预设动作时,通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案;根据所述行进方案,生成第二语音信息,用于引导所述使用者执行行进动作;在所述使用者执行行进动作时,获取所述使用者的运动状态信息及当前道路信息,基于所述运动状态信息及当前道路信息生成第三语音信息,用于为所述使用者提供道路指引。通过响应使用者的指令信息提供对应的服务模式,其中包括盲道探测,先引导使用者执行预设动作,以便于采集图像数据,进而得到行进方案,引导使用者执行行进动作,同时根据行进过程中的运动状态信息及当前道路信息,实时生成语音信息,为使用者提供全面且及时的道路指引,从而实现指引盲人安全出行。
附图说明
[0043]图1为本专利技术语音辅助装置所属终端设备的功能模块示意图;
[0044]图2为本专利技术语音辅助方法一示例性实施例的流程示意图;
[0045]图3为本专利技术实施例中启动语音助手的流程示意图;
[0046]图4为图2实施例中步骤S30的具体流程示意图;
[0047]图5为本专利技术实施例中的智能手表的结构示意图;
[0048]图6为本专利技术实施例中的探测盲道的流程示意图。
[0049]本专利技术目的的实现、功能特点及优点将结合实施例,参本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种语音辅助方法,其特征在于,所述语音辅助方法包括以下步骤:响应于使用者的指令信息,启动所述指令信息对应的服务模式;若所述服务模式为盲道探测,则生成第一语音信息,用于引导所述使用者执行预设动作;在所述使用者执行预设动作时,通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案;根据所述行进方案,生成第二语音信息,用于引导所述使用者执行行进动作;在所述使用者执行行进动作时,获取所述使用者的运动状态信息及当前道路信息,基于所述运动状态信息及当前道路信息生成第三语音信息,用于为所述使用者提供道路指引。2.如权利要求1所述的语音辅助方法,其特征在于,所述服务模式还包括语音助手,所述响应于使用者的指令信息,启动所述指令信息对应的服务模式的步骤之后还包括:若所述服务模式为语音助手,则通过麦克风采集所述使用者的语音声波;将所述语音声波与系统数据库中的各功能声波进行匹配,得到所述语音声波对应的功能声波;基于所述对应的功能声波产生对应的系统指令,并根据所述系统指令启动对应功能。3.如权利要求1所述的语音辅助方法,其特征在于,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案的步骤之前还包括:采集相关图像数据集;对所述相关图像数据集中的盲道信息进行标记,得到探测模型数据库;基于所述探测模型数据库建立所述探测模型。4.如权利要求3所述的语音辅助方法,其特征在于,所述通过摄像头采集图像数据,并基于预设的探测模型对所述图像数据进行处理,得到行进方案的步骤包括:通过所述摄像头采集预设方向的图像数据;基于所述探测模型对所述图像数据中的可疑盲道数据进行标记,得到标记数据;基于所述探测模型数据库对所述标记数据进行识别,判断所述标记数据中是否包括特征数据;若所述标记数据中包括所述特征数据,则通过所述探测模型中的方位算法计算盲道相对位置,其中,所述盲道相对位置包括盲道方位及盲道距离;基于所述盲道相对位置生成所述行进方案。5.如权利要求1所述的语音辅助方法,其特征在于,所述获取所述使用者的运动状态信...

【专利技术属性】
技术研发人员:屈博
申请(专利权)人:西安歌尔泰克电子科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1