一种机器人语音交互系统技术方案

本发明专利技术涉及机器人领域，具体公开了一种机器人语音交互系统，所述机器人语音交互系统包括人脸图像采集装置，用于采集所述机器人视野范围内的人脸图像信息；用户语音信息采集装置，用于采集用户的语音信息；中央控制器，用于根据所述人脸图像信息以及用户的语音信息确定相应的语音输出信息；以及语音输出装置，用于输出所述确定的语音输出信息。本发明专利技术实施例通过同时采集用户的人脸图像信息以及语音信息，并根据上述信息共同确定相应的语音输出信息，使得相应的语音输出信息既能够有效地回复用户，还能满足用户的情感需求，有效地解决了现有机器人语音交互系统中存在的“机械式交流”的技术问题。

A Robot Speech Interactive System

The invention relates to the field of robots, in particular to a robot voice interaction system, which comprises a face image acquisition device for acquiring face image information within the scope of vision of the robot, a user voice information acquisition device for acquiring voice information of the user, and a central controller for acquiring and using the face image information according to the said face image information. The voice information of the household determines the corresponding voice output information, and the voice output device for outputting the determined voice output information. The embodiment of the present invention can not only effectively reuse the user's face image information and voice information, but also meet the user's emotional needs by collecting the user's face image information and voice information at the same time and jointly determining the corresponding voice output information according to the above information, thus effectively solving the technical problem of \mechanical communication\ existing in the existing robot voice interaction system. \u3002

【技术实现步骤摘要】
一种机器人语音交互系统
本专利技术涉及机器人领域，特别是涉及一种机器人语音交互系统。
技术介绍
机器人技术作为20世纪最为伟大的专利技术之一，目前也随着技术的不断创新，逐渐应用于各大领域之中。而人机交互技术一直都是机器人领域的重要研究课题，其中随着语音识别技术的日臻成熟，并通过预先存储的语言数据库，已经实现了机器人与人的“简单沟通”。然而，本领域当前的语音交互系统都只注重于与用户在语言内容上的交流，而没有注重于用户情感上的需求。因此，实际中机器人与用户的交流大多都是“木讷”的，都是处于一种被动回答的形式，这样会极大地降低人机交互的趣味性。可见，现有技术中，采用语音识别系统作为机器人的语音交互系统只能够理解用户的语言内容而无法理解用户的情绪，无法满足部分用户的情感需求，同时只能够被动回答用户的问题，而无法与用户进行“拟人化的沟通”。同时由于语音交互系统的单一性，在缺少感情的基调上，很容易出现交流上的障碍。
技术实现思路
本专利技术实施例提供一种机器人语音交互系统，旨在解决现有技术中采用语音识别系统作为机器人的语音交互系统中存在的无法理解用户的情绪，无法满足用户的情感需求，同时也无法与用户进行“拟人化的沟通”的技术问题。本专利技术实施例提供一种机器人语音交互系统，所述机器人语音交互系统包括中央控制器，与所述中央控制器通信的人脸图像采集装置、用户语音采集装置以及语音输出装置；所述人脸图像采集装置，用于采集所述机器人视野范围内的人脸图像信息，并发送给中央控制器；所述用户语音采集装置，用于采集用户的语音信息，并发送给中央控制器；所述中央控制器，用于接收所述人脸图像信息，并根据所述人脸图像信息获取人脸情绪特征信息；用于接受所述用户的语音信息；用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置；以及所述语音输出装置，用于接收所述语音输出信息，并根据所述语音输出信息输出语音。本专利技术实施例提供的机器人语音交互系统通过用户语音信息采集装置能够获取用户的语音信息，便于机器人能够对用户的问题做出相应的回答，而人脸图像信息采集装置能够获取用户当前的情绪信息，便于机器人判断用户的情感需求，同时获取用户的语音信息以及用户当前的情绪信息，从而使得机器人能够使用更加“拟人化的口吻”对用户的问题做出相应的回答。此外，语音输出装置能够模拟输出多种不同类型的语气，从而在于用户进行沟通时，更加的生动形象，极大地满足了用户的情感需求。附图说明图1是本专利技术实施例提供的一种机器人语音交互系统的结构示意图；图2是本专利技术实施例提供的中央控制器的结构示意图；图3是本专利技术实施例提供的人脸图像信息接收单元的结构示意图；图4是本专利技术又一种实施例提供的中央控制器的结构示意图；图5是本专利技术又一种实施例提供的第二信息处理单元的结构示意图；图6是本专利技术又一种实施例提供的语音输出装置的结构示意图；具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。本专利技术实施例提供的机器人语音交互系统通过用户语音信息采集装置能够获取用户的语音信息，便于机器人能够对用户的问题做出相应的回答，而人脸图像信息采集装置能够获取用户当前的情绪信息，便于机器人判断用户的情感需求，同时获取用户的语音信息以及用户当前的情绪信息，从而使得机器人能够使用更加“拟人化的口吻”对用户的问题做出相应的回答。图1示出了本专利技术实施例提供的一种机器人语音交互系统的结构示意图，详述如下。本专利技术实施例提供的机器人语音交互系统，包括：人脸图像采集装置101，用于采集所述机器人视野范围内的人脸图像信息，并发送给中央控制器。在本专利技术实施例中，所述人脸图像采集装置优选设置在机器人“眼部区域”，当所述人脸图像采集装置设置在机器人“眼部区域”时，可以有效的限制机器人需要正对当前交流的用户才可以采集人脸图像，避免出现机器人在与用户沟通时未正对用户的情况，使得机器人更加的拟人化。在本专利技术实施例中，所述人脸图像采集装置可以是照相机、摄像机等周期性的获取人脸图像信息的装置，也可以是监视器、录影机等持续性的获取人脸图像信息的装置，还可以是其他能够将光信号转化为电信号的装置。其中，所述人脸图像采集装置优选摄像机，并周期性的对用户进行拍摄生成含有人脸图像信息的相片文件，并将所述含有人脸图像信息的相片文件发送给中央控制器。用户语音采集装置102，用于采集用户的语音信息，并发送给中央控制器。在本专利技术实施例中，所述用户语音采集装置优选话筒，当所述用户语音采集装置使用话筒时，能够即时的获取用户的语音信息，并即时的将所述语音信息发送给中央控制器，可以有效地提高机器人的沟通效率，也可以选择录音设备，将用户的完整的语音信息保存后并发送给中央控制器，还可以选择其他能够将声波转化为电信号的装置。作为本专利技术的一个实施例，所述用户语音采集装置在获取到用户的语音信息后能够对所述用户的语音信息进行降噪处理，再将处理后的语音信息发送给中央控制器，所述降噪处理可以有效的避免中央控制器接收到受到噪音信号干扰的语音信息，能够有效地提高机器人的沟通效率。中央控制器103，用于接收所述人脸图像信息，并根据所述人脸图像信息获取人脸情绪特征信息；用于接受所述用户的语音信息；用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置。作为本专利技术的一个实施例，所述人脸情绪特征信息包括人脸对应的情绪信息如开心、愤怒、伤心等。作为本专利技术的一个实施例，所述确定的语音输出信息与人脸情绪特征信息以及所述的用户的语音信息均有关系，以下述一个例子作简要说明：当接收到用户同样的语音信息“你好”时，如果判断用户的情绪特征信息为开心时，则输出的语音信息为“你好”，如果判断用户的情绪特征信息为难过时，则输出的语音信息为“你好，请问你怎么了”。所述由人脸情绪特征信息以及所述的用户的语音信息共同确定的语音输出信息能够使得机器人更加智能化，拟人化，能够满足用户的情感需求，进一步的，还可以作为用户的“倾诉对象”作为本专利技术的另一个实施例，所述中央控制器还用于根据所述人脸图像信息获取与所述人脸对应的性别和年龄信息。所述中央控制器还用于根据所述人脸情绪特征信息、所述人脸对应的性别和年龄以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置。作为本专利技术的另一个实施例，所述确定的语音输出信息与所述人脸情绪特征信息、所述的用户的语音信息以及所述人脸对应的性别和年龄均有关系，以下述一个例子作简要说明。当接收到用户同样的语音信息“你好”时，如果确定人脸对应的性别与年龄分别为男、青年，则输出的语音信息为“先生，你好”，如果确定人脸对应的性别与年龄分别为女、年幼时，则输出的语音信息为“小妹妹，你好”。所述由人脸情绪特征信息、所述人脸对应的性别和年龄以及所述用户的语音信息共同确定的语音输出信息进一步的使得机器人更加智能化、拟人化，同时也有利于用户与机器人进行沟通，用户能够根据机器人输出的语音信息主动判断出机器人正在沟通的对象。作为本专利技术的又一个实施例，所述语音输出信息包括语音输出内容信息以及语音输出语气信息，所述语音输出语气信息包括开心的语气、本文档来自技高网...

【技术保护点】
1.一种机器人语音交互系统，其特征在于，所述机器人语音交互系统包括中央控制器，与所述中央控制器通信的人脸图像采集装置、用户语音采集装置以及语音输出装置；所述人脸图像采集装置，用于采集所述机器人视野范围内的人脸图像信息，并发送给中央控制器；所述用户语音采集装置，用于采集用户的语音信息，并发送给中央控制器；所述中央控制器，用于接收所述人脸图像信息，并根据所述人脸图像信息获取人脸情绪特征信息；用于接受所述用户的语音信息；用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置；以及所述语音输出装置，用于接收所述语音输出信息，并根据所述语音输出信息输出语音。

【技术特征摘要】
1.一种机器人语音交互系统，其特征在于，所述机器人语音交互系统包括中央控制器，与所述中央控制器通信的人脸图像采集装置、用户语音采集装置以及语音输出装置；所述人脸图像采集装置，用于采集所述机器人视野范围内的人脸图像信息，并发送给中央控制器；所述用户语音采集装置，用于采集用户的语音信息，并发送给中央控制器；所述中央控制器，用于接收所述人脸图像信息，并根据所述人脸图像信息获取人脸情绪特征信息；用于接受所述用户的语音信息；用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置；以及所述语音输出装置，用于接收所述语音输出信息，并根据所述语音输出信息输出语音。2.根据权利要求1所述的系统，其特征在于，所述中央控制器还用于根据所述人脸图像信息获取与所述人脸对应的性别和年龄信息；所述用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置，具体为：用于根据所述人脸情绪特征信息、与所述人脸对应的性别和年龄以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置。3.根据权利要求1所述的系统，其特征在于，所述中央控制器包括：人脸图像信息接收单元，用于接收所述人脸图像信息，并根据所述人脸图像信息获取人脸情绪特征信息；用户语音信息接收单元，用于接收所述用户的语音信息；以及第一信息处理单元，用于根据所述人脸情绪特征信息以及所述用户的语音信息，确定语音输出信息，并发送给语音输出装置。4.根据权利要求3所述的系统，其特征在于，所述人脸图像信息接收单元包括；人脸图像信息接收模块，用于接收所述人脸图像信息；以及人脸情绪特征信息获取模块，用于根据所述人脸图像信息与预存的标准人脸情绪图像信息与人脸情绪特征信息的对应关系，获取与所述人脸图像信息对应的人脸情绪特征信息。5.根据权利要求3所述的系统，其特征在于，所述第一信息处理单元具体用于根据所述人脸情绪特征信息、所述用户的语音信息以及预存的语音输出信息与人脸情绪特征信息、用户的语音...

【专利技术属性】
技术研发人员：庄永军，
申请(专利权)人：深圳市三宝创新智能有限公司，
类型：发明
国别省市：广东,44