System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种智能迎宾接待方法、装置、设备及存储介质制造方法及图纸_技高网

一种智能迎宾接待方法、装置、设备及存储介质制造方法及图纸

技术编号:42572003 阅读:13 留言:0更新日期:2024-08-29 00:37
本申请提出一种智能迎宾接待方法、装置、设备及存储介质,智能迎宾接待方法通过采集访客的人脸信息,对人脸信息进行识别处理,确定访客类型,访客类型包括客人、快递员以及物业人员中的至少之一,根据访客类型,匹配个性化接待策略,自动根据人脸信息确定访客类型,然后匹配个性化接待策略,针对性强,有利于减少访客需要进行的操作,省时省力,方便快捷且人性化;在执行个性化接待策略的过程中采集访客的语音数据,对语音数据进行语音识别处理,根据语音识别处理结果,执行目标接待策略,能够及时对访客的语音数据进行反馈,有利于提高访客的体验。

【技术实现步骤摘要】

本申请涉及人工智能领域,尤其涉及一种智能迎宾接待方法、装置、设备及存储介质


技术介绍

1、现实生活中,当访客到达访问地点时,通常需要在前台完成人工登记,写上访客的相关信息、目的等等的内容,并且每一个访客都需要前台人员逐一对接,效率低下且需要一定的人力成本。因此,相关技术人员基于此问题,研发了前台机器人,但是现有的前台机器人智能化程度低,其只能通过显示屏显示相关内容,然后所有访客都需要亲在显示屏进行操作,以完成相关的登记或获取指引等目的,对于不熟悉前台机器人的访客来说,费时费力,访客的体验差,因此需要解决方案。


技术实现思路

1、本申请实施例提供一种智能迎宾接待方法、装置、设备及存储介质,以解决相关技术存在的至少一个问题,技术方案如下:

2、第一方面,本申请实施例提供了一种智能迎宾接待的方法,包括:

3、采集访客的人脸信息;

4、对所述人脸信息进行识别处理,确定访客类型,所述访客类型包括客人、快递员以及物业人员中的至少之一;

5、根据所述访客类型,匹配个性化接待策略,并在执行所述个性化接待策略的过程中采集访客的语音数据;

6、对所述语音数据进行语音识别处理,根据语音识别处理结果,执行目标接待策略。

7、在一种实施方式中,所述采集访客的人脸信息包括:

8、通过摄像头拍摄图像;

9、对所述图像进行人脸特征提取,确定人脸特征信息;

10、当所述人脸特征信息包括一个人脸的人脸信息,将所述人脸特征信息作为访客的人脸信息;

11、当所述人脸特征信息包括多个人脸的人脸信息,确定每一人脸信息占所述图像的比例,当最大比例唯一时,将最大比例对应的人脸信息作为访客的人脸信息,当最大比例不唯一时,分别计算最大比例的人脸信息的中心坐标与所述图像的中心点之间的距离,将所述距离最小的人脸信息作为访客的人脸信息。

12、在一种实施方式中,所述对所述人脸信息进行识别处理,确定访客类型包括:

13、将所述人脸信息与人脸数据库中的预存人脸进行匹配;

14、当匹配成功时,将匹配的预存人脸的类型作为访客类型;

15、当匹配失败时,在屏幕上显示可选择的访客类型,响应于触摸操作确定选择的访客类型,或者,调整摄像头的焦距以获取访客的人体图像,通过识别模型对所述人体图像进行识别,确定当前衣着特征,根据当前衣着特征与预存的物业人员的第一衣着特征以及快递员的第二衣着特征进行相似度计算,确定访客类型。

16、在一种实施方式中,所述根据当前衣着特征与物业人员的第一衣着特征以及快递员的第二衣着特征进行相似度计算,确定访客类型包括:

17、通过相似度算法,计算所述当前衣着特征与预存的所述第一衣着特征的第一相似度,以及计算所述当前衣着特征与预存的所述第二衣着特征的第二相似度;

18、当所述第一相似度大于或等于相似度阈值,则确定访客类型为物业人员,当所述第二相似度大于或等于相似度阈值,则确定访客类型为快递员,当所述第一相似度小于相似度阈值且所述第二相似度小于相似度阈值,则确定访客类型为客人。

19、在一种实施方式中,所述根据所述访客类型,匹配个性化接待策略包括:

20、当访客类型为快递员时,播放寻找快递柜的提示内容并显示快递柜的位置,当快递员到达所述快递柜的位置并基于手机尾号存放物件后,基于手机尾号从通讯录中寻找目标手机号码,并向所述目标手机号码发送待取物件信息或者自动拨打所述目标手机号码,通过文字转语音播放待取物件信息;

21、当访客类型为物业人员时,播放预先收集的反馈信息,并基于所述反馈信息关联身份id,显示所述身份id的联系方式,响应于对所述联系方式的点击指令,建立与所述身份id对应的人员的通话,所述反馈信息包括报修、咨询、投诉以及建议;

22、当访客类型为客人时,提示客人出示访问码信息,获取访问码信息,根据所述访问码信息与预先通过小程序收集的访问信息匹配,确定访问对象,根据数据库中所述访问对象的信息,确定所述访问对象所在的目标楼层中的目标区域,根据室内地图生成显示到达所述目标楼层中的目标区域的导航路线并播放导航语音,以及基于所述人脸信息为客人发放门禁权限,供客人通过门禁进入电梯。

23、在一种实施方式中,所述语音数据包括若干时刻的音频信息;所述对所述语音数据进行语音识别处理,根据语音识别处理结果,执行目标接待策略包括:

24、确定第一时刻以及与所述第一时刻相邻的第二时刻,并确定所述第一时刻的音频信息的第一幅值以及所述第二时刻的音频信息第二幅值;

25、计算幅值加强系数与所述第一幅值的乘积,确定所述第二幅值与所述乘积的差值,得到加强幅值,将所述第二幅值更新为所述加强幅值,将所述第二时刻作为新的第一时刻并确定新的第二时刻,返回所述确定所述第一时刻的音频信息的第一幅值以及所述第二时刻的音频信息第二幅值的步骤,直至若干时刻的音频信息都被更新,得到加强语音数据;

26、对所述加强语音数据进行分帧处理,得到若干帧加强音频信号,计算每一帧加强音频信号的短时平均幅度,当所述短时平均幅度大于或等于能量阈值,将所述加强语音数据确定为目标语音数据,否则通过声音增强模型对所述加强语音数据进行声音增强,得到目标语音数据;

27、根据所述目标语音数据计算情感分数,根据情感分数确定情感类型,并根据所述情感类型从语调数据库中匹配目标语调;

28、将所述目标语音数据转换为文本内容,根据所述文本内容确定目标回答文本;

29、当访客类型为快递员时,基于预设声音、所述目标语调以及所述目标回答文本合成第一音频,将所述第一音频作为对所述语音数据的回答进行播放;

30、当访客类型为物业人员时,基于所述身份id匹配对应人员的第一声音,根据所述第一声音、所述目标语调以及所述目标回答文本合成第二音频,将所述第二音频作为对所述语音数据的回答进行播放;

31、当访客类型为客人时,基于所述访问对象匹配对应的第二声音,根据所述第二声音、所述目标语调以及所述目标回答文本合成第三音频,将所述第三音频作为对所述语音数据的回答进行播放。

32、在一种实施方式中,所述根据情感分数确定情感类型包括:

33、将所述情感分数与若干个分数范围进行比较,将包含所述情感分数的目标分数范围对应的情感作为情感类型;

34、或者,

35、从所述人脸信息中提取左眼特征信息、右眼特征信息、左嘴角特征信息以及右嘴角特征信息,根据所述左眼特征信息与所述右眼特征信息确定第一间隔,根据所述左嘴角特征信息与所述右嘴角特征信息确定第二间隔,根据所述第一间隔以及所述第二间隔确定脸部特征分数,根据所述情感分数以及所述脸部特征分数进行加权计算,确定目标分数,将所述目标分数与若干个分数范围进行比较,将包含所述目标分数的目标分数范围对应的情感作为情感类型。

36、第本文档来自技高网...

【技术保护点】

1.一种智能迎宾接待方法,其特征在于,包括:

2.根据权利要求1所述智能迎宾接待方法,其特征在于:所述采集访客的人脸信息包括:

3.根据权利要求1所述智能迎宾接待方法,其特征在于:所述对所述人脸信息进行识别处理,确定访客类型包括:

4.根据权利要求3所述智能迎宾接待方法,其特征在于:所述根据当前衣着特征与物业人员的第一衣着特征以及快递员的第二衣着特征进行相似度计算,确定访客类型包括:

5.根据权利要求3所述智能迎宾接待方法,其特征在于:所述根据所述访客类型,匹配个性化接待策略包括:

6.根据权利要求5所述智能迎宾接待方法,其特征在于:所述语音数据包括若干时刻的音频信息;所述对所述语音数据进行语音识别处理,根据语音识别处理结果,执行目标接待策略包括:

7.根据权利要求6所述智能迎宾接待方法,其特征在于:所述根据情感分数确定情感类型包括:

8.一种智能迎宾接待装置,其特征在于,包括:

9.一种电子设备,其特征在于,包括:处理器和存储器,所述存储器中存储指令,所述指令由所述处理器加载并执行,以实现如权利要求1-7任一项所述的方法。

10.一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被执行时实现如权利要求1-7中任一项所述的方法。

...

【技术特征摘要】

1.一种智能迎宾接待方法,其特征在于,包括:

2.根据权利要求1所述智能迎宾接待方法,其特征在于:所述采集访客的人脸信息包括:

3.根据权利要求1所述智能迎宾接待方法,其特征在于:所述对所述人脸信息进行识别处理,确定访客类型包括:

4.根据权利要求3所述智能迎宾接待方法,其特征在于:所述根据当前衣着特征与物业人员的第一衣着特征以及快递员的第二衣着特征进行相似度计算,确定访客类型包括:

5.根据权利要求3所述智能迎宾接待方法,其特征在于:所述根据所述访客类型,匹配个性化接待策略包括:

6.根据权利要求5所述智能迎宾接待方法,其特...

【专利技术属性】
技术研发人员:徐勇熊国辉潘桂煌王辉
申请(专利权)人:广州市高科通信技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1