【技术实现步骤摘要】
一种儿童机器人上利用图像辅助的声源方向判定系统
本专利技术涉及智能机器人
,特别涉及儿童机器人上利用图像辅助的声源方向判定系统。
技术介绍
随着科技的不断发展,智能机器人越来越多的被应用在各个工程
中,当前,智能机器人也越来越多的应用到家庭生活中,现在的儿童鞥机器人通过语言交互,语音互动来与儿童或其他家庭成员实现语音智能沟通,但是,传统的语音智能机器人采用单一的麦克风阵列的声源定位技术,只依靠麦克风拾音定位声源,这种定位声源的方式导致机器人在混响严重、环境嘈杂的环境下在拾音准确率较差的问题。
技术实现思路
本专利技术提供了一种儿童机器人上利用图像辅助的声源方向判定系统,用以解决现有的儿童机器人只依靠麦克风拾音定位声源,在混响严重、环境嘈杂的环境下拾音准确率较差问题,所采取的技术方案如下:本专利技术提出的一种儿童机器人上利用图像辅助的声源方向判定系统,所述声源方向判定系统包括声源定位打分模块、机器人转动控制模块、摄像头取景模块、摄像头、摄像头取景模块和人像判断模块;其中,声源定位 ...
【技术保护点】
1.一种儿童机器人上利用图像辅助的声源方向判定系统,其特征在于,所述声源方向判定系统包括声源定位打分模块、机器人转动控制模块、摄像头取景模块、摄像头、摄像头取景模块和人像判断模块;其中,/n所述声源定位模块,用于确定用户语音指令发出的方向和距离;/n所述声源定位打分模块,利用声源定位方法提供多个声源定位选项位置,并给每个定位选项位置打分,获得定位分数;/n所述机器人转动控制模块,用于控制机器人按定位分数高低的顺序转动至声源定位选项位置;/n所述摄像头取景模块,当机器人转动到声源定位选项位置时,用于控制摄像头在声源定位选项位置进行取景,获得声源定位选项位置的场景图像;/n所述 ...
【技术特征摘要】
1.一种儿童机器人上利用图像辅助的声源方向判定系统,其特征在于,所述声源方向判定系统包括声源定位打分模块、机器人转动控制模块、摄像头取景模块、摄像头、摄像头取景模块和人像判断模块;其中,
所述声源定位模块,用于确定用户语音指令发出的方向和距离;
所述声源定位打分模块,利用声源定位方法提供多个声源定位选项位置,并给每个定位选项位置打分,获得定位分数;
所述机器人转动控制模块,用于控制机器人按定位分数高低的顺序转动至声源定位选项位置;
所述摄像头取景模块,当机器人转动到声源定位选项位置时,用于控制摄像头在声源定位选项位置进行取景,获得声源定位选项位置的场景图像;
所述人像判断模块,用于根据所述场景图像判断声源定位选项位置是否有人像。
2.根据权利要求1所述声源方向判定系统,其特征在于,所述声源方向判定系统还包括人像设置模块、身体特征设置模块和用户匹配检测模块;其中,
人像设置模块,在机器人运行前,用于发出语音指令的用户在机器人内提前设置用户头像;
身体特征设置模块,在机器人运行前,用于出语音指令的用户在机器人内提前设置身体特征,所述身体特征包括颈部特征、肩膀特征、肘部特征、手部特征,髋部特征,膝部特征和脚部特征;
用户匹配检测模块,用于对所述场景图像进行两级图像处理,然后将所述场景图像与用户头像或身体特征进行匹配,检测确定发出语音指令的用户。
3.根据权利要求1所述声源方向判定系统,其特征在于,所述声源方向判定系统还包括拾音和交互开启模块、拾音和交互关闭模块和有效图像判断模块;其中,
拾音和交互开启模块,用于当机器人确认声源定位选项位置有人或者确定语音指令用户是,自动开启拾音和语音交互;
拾音和交互关闭模块,用于当机器人被错误唤醒时,自动关闭拾音和语音交互。
4.根据权利要求2所述声源方向判定系统,其特征在于,所述用户匹配检测模块包括远一级图像处理模块、二级图像处理模块和特征识别匹配模块;其中,
一级图像处理模块,用于将所述场景图像进行分割提取,获取图像识别区域;所述图像识别区域包括人像识别区域和背景识别区域;
二级图像处理模块,用于对所述图像识别区域进行图像清晰度调整。
特征识别匹配模块,用于在人像识别区域和背景识别区域中分别利用头像识别和身体特征识别方式确定在所述图像识别区域中是否存在对应用户。
5....
【专利技术属性】
技术研发人员:郑艳霞,
申请(专利权)人:云知声智能科技股份有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。