一种儿童教育机器人及其学习资料推送方法技术

本申请涉及一种儿童教育机器人及其学习资料推送方法，其中，该学习资料推送方法包括：通过一个或多个摄像头采集图像；通过一个或多个麦克风采集声音；对声音进行语音识别；根据图像识别儿童的行为；根据图像识别儿童的情绪；根据图像和声音识别儿童所处的情景；以及基于识别出的语音、行为、情绪和情景向儿童推送学习资料。本申请实现了基于行为、情绪和所处的情景来推送学习资料，使得学习资料的推送更具有针对性。

【技术实现步骤摘要】
一种儿童教育机器人及其学习资料推送方法
本申请涉及儿童教育机器人领域，尤其涉及一种儿童教育机器人及其学习资料推送方法。
技术介绍
相关技术中，一些儿童教育机器人基于触摸屏的点击交互来根据儿童的操作向二通提供学习资料；另一些儿童教育机器人基于语音识别技术来向儿童提供学习资料。然而，相关技术中的儿童教育机器人一部分是儿童主动获取学习资料，造成儿童选择困难。另一些交互方式较为单一，难以实现主动且具有针对性的学习资料推送。
技术实现思路
为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种儿童教育机器人及其学习资料推送方法。第一方面，本申请提供了一种用于儿童教育机器人的学习资料推送方法，包括：通过一个或多个摄像头采集图像；通过一个或多个麦克风采集声音；对声音进行语音识别；根据图像识别儿童的行为；根据图像识别儿童的情绪；根据图像和声音识别儿童所处的情景；以及基于识别出的语音、行为、情绪和情景向儿童推送学习资料。在某些实施例中，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：根据语音、行为、情绪和情景与学习资料的关联关系，在第一学习资料数据库中检索与识别出的语音、行为、情绪和情景对应的学习资料。在某些实施例中，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：向服务器发送识别出的语音、行为、情绪和情景；接收服务器根据语音、行为、情绪和情景与学习资料的关联关系，在第二学习资料数据库中检索到的与识别出的语音、行为、情绪和情景对应的学习资料。在某些实施例中，根据图像和声音识别儿童所处的情景包括：根据图像进行物品识别；根据声音进行语音和语义识别；根据物品识别的结果和语义识别的结果，确定儿童所处的情景。第二方面，本申请提供了一种用于儿童教育机器人的学习资料推送方法，包括：获取儿童的语音、行为、情绪和情景；根据语音、行为、情绪和情景与学习资料的关联关系，在学习资料数据库中检索与获取的语音、行为、情绪和情景对应的学习资料；向儿童教育机器人推送检索出的学习资料。在某些实施例中，获取儿童的语音、行为、情绪和情景包括：获取儿童教育机器人的一个或多个摄像头采集的图像；获取儿童教育机器人的一个或多个麦克风采集的声音；对声音进行语音识别；根据图像识别儿童的行为；根据图像识别儿童的情绪；根据图像和声音识别儿童所处的情景。第三方面，本申请提供了一种儿童教育机器人，该儿童教育机器人包括：一个或多个麦克风；一个或多个摄像头；存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序；计算机程序被处理器执行时实现如下步骤：通过一个或多个摄像头采集图像；通过一个或多个麦克风声音；对声音进行语音识别；根据图像识别儿童的行为；根据图像识别儿童的情绪；根据图像和声音识别儿童所处的情景；以及基于识别出的语音、行为、情绪和情景向儿童推送学习资料。在某些实施例中，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：根据语音、行为、情绪和情景与学习资料的关联关系，在第一学习资料数据库中检索与识别出的语音、行为、情绪和情景对应的学习资料。在某些实施例中，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：向服务器发送识别出的语音、行为、情绪和情景；接收服务器根据语音、行为、情绪和情景与学习资料的关联关系，在第二学习资料数据库中检索到的与识别出的语音、行为、情绪和情景对应的学习资料。第四方面，本申请提供了一种计算机可读存储介质，计算机可读存储介质上存储有用于儿童教育机器人的学习资料推送程序，用于儿童教育机器人的学习资料推送程序被处理器执行时实现上述任意用于儿童教育机器人的学习资料推送方法的步骤。本申请实施例提供的上述技术方案与现有技术相比具有如下优点：本申请实施例提供的儿童教育机器人及其学习资料推送方法，实现了基于行为、情绪和所处的情景来推送学习资料，使得学习资料的推送更具有针对性。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本专利技术的实施例，并与说明书一起用于解释本专利技术的原理。为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本申请实施例提供的儿童教育机器人一种实施方式的硬件结构示意图；图2为本申请实施例提供的儿童教育机器人系统一种实施方式的硬件结构示意图；图3为本申请实施例提供的儿童教育机器人系统另一种实施方式的硬件结构示意图；图4为本申请实施例提供的学习资料推送方法一种实施方式的流程图；图5为本申请实施例提供的学习资料推送方法另一种实施方式的流程图；以及图6为本申请实施例提供的学习资料推送方法又一种实施方式的流程图。具体实施方式应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本专利技术的说明，其本身没有特定的意义。因此，“模块”、“部件”或“单元”可以混合地使用。请参阅图1所示，本专利技术实施例中提供的儿童教育机器人100包括：一个或多个摄像头10，用于采集图像；一个或多个麦克风20，用于采集声音；语音识别单元30，与一个或多个麦克风20电连接，用于进行语音识别；行为识别单元40，与一个多个摄像头10电连接，用于根据图像识别儿童的行为；情绪识别单元50，与一个多个摄像头10电连接，用于根据图像识别儿童的情绪；情景识别单元60，与一个多个摄像头10电连接，用于根据图像和声音识别儿童所处的情景；以及学习资料推送单元70，与行为识别单元40、情绪识别单元50和情景识别单元60耦合，用于响应于语音识别单元30、行为识别单元40、情绪识别单元50和情景识别单元60的识别结果向儿童推送学习资料。在某些实施例中，请参阅图1所示，该儿童教育机器人100，还包括：数据库单元80，用于存储学习资料，其中学习资料可包括可视部分和音频部分。学习资料推送单元70，包括：检索单元73，用于响应于行为识别单元40、情绪识别单元50和情景识别单元60的识别结果在数据库单元80中检索相应的学习资料。在某些实施例中，数据库单元80，用于存储行为识别单元40、情绪识别单元50和情景识别单元60的识别结果与学习资料的对应关系；检索单元73，用于根据对应关系检索与行为识别单元40、情绪识别单元50和情景识别单元60的识别结果相应的学习资料。在某些实施例中，请参阅图1所示，该儿童教育机器人还包括：显示器91，用于显示学习资料的可视部分；和/或音频输出单元92，用于播放学习资料的音频部分。在某些实施例中，一个或多个麦克风20为麦克风阵列。语音识别单元30，可包括声源定位单元、语音增强单元等，在此不一一赘述。一个或多个摄像头10包括深度摄像头，本文档来自技高网...

【技术保护点】
1.一种用于儿童教育机器人的学习资料推送方法，其特征在于，包括：/n通过一个或多个摄像头采集图像；/n通过一个或多个麦克风采集声音；/n对所述声音进行语音识别；/n根据所述图像识别儿童的行为；/n根据所述图像识别儿童的情绪；/n根据所述图像和所述声音识别儿童所处的情景；以及/n基于识别出的语音、行为、情绪和情景向儿童推送学习资料。/n

【技术特征摘要】
1.一种用于儿童教育机器人的学习资料推送方法，其特征在于，包括：
通过一个或多个摄像头采集图像；
通过一个或多个麦克风采集声音；
对所述声音进行语音识别；
根据所述图像识别儿童的行为；
根据所述图像识别儿童的情绪；
根据所述图像和所述声音识别儿童所处的情景；以及
基于识别出的语音、行为、情绪和情景向儿童推送学习资料。


2.根据权利要求1所述的用于儿童教育机器人的学习资料推送方法，其特征在于，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：
根据语音、行为、情绪和情景与学习资料的关联关系，在第一学习资料数据库中检索与识别出的语音、行为、情绪和情景对应的学习资料。


3.根据权利要求1或2所述的用于儿童教育机器人的学习资料推送方法，其特征在于，基于识别出的语音、行为、情绪和情景向儿童推送学习资料，包括：
向服务器发送识别出的语音、行为、情绪和情景；
接收所述服务器根据语音、行为、情绪和情景与学习资料的关联关系，在第二学习资料数据库中检索到的与识别出的语音、行为、情绪和情景对应的学习资料。


4.根据权利要求1所述的用于儿童教育机器人的学习资料推送方法，其特征在于，根据所述图像和所述声音识别儿童所处的情景包括：
根据所述图像进行物品识别；
根据所述声音进行语音和语义识别；
根据所述物品识别的结果和所述语义识别的结果，确定儿童所处的情景。


5.一种用于儿童教育机器人的学习资料推送方法，其特征在于，包括：
获取儿童的语音、行为、情绪和情景；
根据语音、行为、情绪和情景与学习资料的关联关系，在学习资料数据库中检索与获取的语音、行为、情绪和情景对应的学习资料；
向儿童教育机器人推送检索出的学习资料。


6.根据权利要求5所述的用于儿童教育机器人的学习资料推送方法，其特征在于，获取儿童的语音、行为、...

【专利技术属性】
技术研发人员：葛明，
申请(专利权)人：香港生产力促进局，
类型：发明
国别省市：中国香港;81