一种表情反馈方法及智能机器人技术

本发明专利技术公开了一种表情反馈方法及智能机器人，属于智能设备；方法包括：步骤S1，智能机器人采用图像采集装置采集图像信息；步骤S2，智能机器人检测图像信息中是否存在表示人脸的人脸信息：若是，则获取关联于人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回步骤S1；步骤S3，根据位置信息和大小信息，预测得到人脸信息中的多个特征点信息并输出；步骤S4，采用一预先训练形成的第一识别模型，根据特征点信息判断人脸信息是否表示笑脸，随后退出：若是，则智能机器人输出预设的表情反馈信息；若否，则退出。上述技术方案的有益效果是：丰富智能机器人和使用者之间的信息交互内容，从而提升使用者的使用体验。

【技术实现步骤摘要】
一种表情反馈方法及智能机器人
本专利技术涉及智能设备
，尤其涉及一种表情反馈方法及智能机器人。
技术介绍
随着智能设备的制造和研发技术的飞速发展，有一种比较特殊的智能设备——智能机器人开始走进人们的生活。所谓智能机器人，其实是一种功能多样化的智能设备，相当于在一个智能设备中集成了不同种类的智能设备的不同功能。例如在一个智能机器人中可能集成有音频播放设备的音频播放功能，视频播放设备的视频播放功能，智能语音设备的语音对话功能以及其他各类功能。现有技术中，智能机器人可以根据使用者输入的信息做出反馈，即智能机器人可以跟使用者之间进行比较简单的信息交互。但是智能机器人针对使用者做出的反馈信息通常是“冷冰冰”的，即并不会依照使用者输入信息时的不同情绪做出不同的反馈，因此造成使用者与智能机器人之间的信息交互的内容比较死板，从而降低使用者的使用体验。
技术实现思路
根据现有技术中存在的上述问题，现提供一种表情反馈方法及智能机器人的技术方案，旨在丰富智能机器人和使用者之间的信息交互内容，从而提升使用者的使用体验。上述技术方案具体包括：一种表情反馈方法，适用于智能机器人，所述智能机器人上设置有图像采集装置；其中，包括：步骤S1，所述智能机器人采用所述图像采集装置采集图像信息；步骤S2，所述智能机器人检测所述图像信息中是否存在表示人脸的人脸信息：若是，则获取关联于所述人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回所述步骤S1；步骤S3，根据所述位置信息和所述大小信息，预测得到所述人脸信息中的多个特征点信息并输出；多个所述特征点信息分别关联于所述人脸信息表示的所述人脸的各部位；步骤S4，采用一预先训练形成的第一识别模型，根据所述特征点信息判断所述人脸信息是否表示笑脸，随后退出：若是，则所述智能机器人输出预设的表情反馈信息；若否，则退出。优选的，该表情反馈方法，其中，于所述智能机器人内预先训练形成一用于检测所述人脸信息的第二识别模型；则所述步骤S2具体为：所述智能机器人采用所述第二识别模型检测所述图像信息中是否存在所述人脸信息：若是，则获取关联于所述人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回所述步骤S1。优选的，该表情反馈方法，其中，于所述智能机器人内预先训练形成一用于预测所述特征点信息的第三识别模型；则所述步骤S3具体为：采用所述第三识别模型，根据所述位置信息和所述大小信息预测得到所述人脸信息中的多个所述特征点信息并输出。优选的，该表情反馈方法，其中，所述步骤S3中，采用所述第三识别模型预测得到关联于所述人脸信息的68个所述特征点信息。优选的，该表情反馈方法，其中，所述步骤S4具体包括：步骤S41，将所述步骤S3中预测得到的所有所述特征点信息输入至所述第一识别模型中；步骤S42，采用所述第一识别模型判断所述人脸信息是否表示笑脸：若是，则所述智能机器人输出预设的表情反馈信息；若否，则退出。优选的，该表情反馈方法，其中，所述步骤S4中，所述表情反馈信息包括：通过所述智能机器人的显示装置显示的用于表示高兴的情绪的预设的表情符号；和/或通过所述智能机器人的语音播放装置播放的用于表示高兴的情绪的预设的声音。一种智能机器人，其中，采用上述的表情反馈方法。上述技术方案的有益效果是：提供一种表情反馈方法，能够丰富智能机器人和使用者之间的信息交互内容，从而提升使用者的使用体验。附图说明图1是本专利技术的较佳的实施例中，一种表情反馈方法的总体流程示意图；图2是本专利技术的较佳的实施例中，于图1的基础上，识别笑脸的流程示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本专利技术保护的范围。需要说明的是，在不冲突的情况下，本专利技术中的实施例及实施例中的特征可以相互组合。下面结合附图和具体实施例对本专利技术作进一步说明，但不作为本专利技术的限定。本专利技术的较佳的实施例中，基于现有技术中存在的上述问题，现提供一种表情反馈方法，其适用于智能机器人。该方法的具体步骤如图1所示，包括：步骤S1，智能机器人采用图像采集装置采集图像信息；步骤S2，智能机器人检测图像信息中是否存在表示人脸的人脸信息：若是，则获取关联于人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回步骤S1；步骤S3，根据所述位置信息和所述大小信息，预测得到所述人脸信息中的多个特征点信息并输出；步骤S4，采用一预先训练形成的第一识别模型，根据特征点信息判断人脸信息是否表示笑脸：若是，则智能机器人输出预设的表情反馈信息，随后退出；若否，则退出。在一个具体实施例中，智能机器人采用面部识别的方式确认其应该反馈何种表情信息。具体地，使用者需要站在智能机器人的图像采集装置(即摄像头)的采集区域内，例如站在图像采集装置的正前方。则该实施例中，智能机器人首先采用图像采集装置采集其采集区域内的图像信息，随后判断该图像信息中是否存在人脸信息：若存在，则接收该人脸信息，并同时提取该人脸信息的位置信息和大小信息。具体地，所谓位置信息，是指该人脸信息位于图像采集装置的取景框内的具体位置；所谓大小信息，是指该人脸信息所表示的人脸的大小。该实施例中，获取到人脸信息及其位置信息和大小信息后，可以根据其位置和大小预测得到该人脸信息的多个特征点信息。具体地，多个特征点信息分别关联于人脸信息表示的人脸的各部位；例如不同的特征点信息分别关联于上述人脸信息所表示的人脸上的眉毛部位、眼睛部位、鼻子部位、嘴巴部位以及整个人脸轮廓等各部位。该实施例中，预测得到上述多个特征点信息后，采用预先训练形成的第一识别模型，根据所有这些特征点信息，识别上述人脸信息所表示的人脸是否为笑脸：若是，则智能机器人根据该笑脸输出预设的表情反馈信息；若否，则直接退出。进一步地，若上述人脸信息不表示笑脸，则智能机器人根据预设的策略输出其他的反馈信息，该过程并不包括在本专利技术技术方案内，因此不对其进行描述。本专利技术的较佳的实施例中，于上述智能机器人内预先训练形成一用于检测人脸信息的第二识别模型；则上述步骤S2具体为：智能机器人采用第二识别模型检测图像信息中是否存在人脸信息：若是，则获取关联于人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回步骤S1。具体地，本专利技术的较佳的实施例中，通过输入多个不同的训练样本，在上述智能机器人内预先训练形成第二识别模型，该第二识别模型为一个人脸检测器，可以用来判断图像采集装置采集得到的图像信息中是否存在人脸信息。在现有技术中存在较多实现训练形成人脸检测器的技术方案，因此在此不再赘述。本专利技术的较佳的实施例中，于智能机器人内预先训练形成一用于预测特征点信息的第三识别模型；则上述步骤S3具体为：采用第三识别模型，根据位置信息和大小信息预测得到人脸信息中的多个特征点信息并输出。具体地，本专利技术的较佳的实施例中，同样通过输入多个不同的训练样本，在上述智能机器人中预先训练形成用于对人脸信息中的多个特征点信息进行预测的第三识别模型。换言之，上述第三识别模型为特征点预测模型。利用该第三识别模型，能够根据人脸信本文档来自技高网...

【技术保护点】
一种表情反馈方法，适用于智能机器人，所述智能机器人上设置有图像采集装置；其特征在于，包括：步骤S1，所述智能机器人采用所述图像采集装置采集图像信息；步骤S2，所述智能机器人检测所述图像信息中是否存在表示人脸的人脸信息：若是，则获取关联于所述人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回所述步骤S1；步骤S3，根据所述位置信息和所述大小信息，预测得到所述人脸信息中的多个特征点信息并输出；多个所述特征点信息分别关联于所述人脸信息表示的所述人脸的各部位；步骤S4，采用一预先训练形成的第一识别模型，根据所述特征点信息判断所述人脸信息是否表示笑脸：若是，则所述智能机器人输出预设的表情反馈信息，随后退出；若否，则退出。

【技术特征摘要】
1.一种表情反馈方法，适用于智能机器人，所述智能机器人上设置有图像采集装置；其特征在于，包括：步骤S1，所述智能机器人采用所述图像采集装置采集图像信息；步骤S2，所述智能机器人检测所述图像信息中是否存在表示人脸的人脸信息：若是，则获取关联于所述人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回所述步骤S1；步骤S3，根据所述位置信息和所述大小信息，预测得到所述人脸信息中的多个特征点信息并输出；多个所述特征点信息分别关联于所述人脸信息表示的所述人脸的各部位；步骤S4，采用一预先训练形成的第一识别模型，根据所述特征点信息判断所述人脸信息是否表示笑脸：若是，则所述智能机器人输出预设的表情反馈信息，随后退出；若否，则退出。2.如权利要求1所述的表情反馈方法，其特征在于，于所述智能机器人内预先训练形成一用于检测所述人脸信息的第二识别模型；则所述步骤S2具体为：所述智能机器人采用所述第二识别模型检测所述图像信息中是否存在所述人脸信息：若是，则获取关联于所述人脸信息的位置信息和大小信息，随后转向步骤S3；若否，则返回所述步骤S1。3.如权利...

【专利技术属性】
技术研发人员：陈明修，
申请(专利权)人：芋头科技杭州有限公司，
类型：发明
国别省市：浙江,33