基于采集机器人终端的系统、机器人终端、方法及介质技术方案

技术编号:28746247 阅读:20 留言:0更新日期:2021-06-06 18:49
本发明专利技术提出一种基于采集机器人终端的系统、机器人终端、方法及介质,包括云服务器和一个或多个采集机器人终端;采集机器人终端包括显示屏、输入部件、摄像头、扬声器、麦克风、通讯模块和处理器;云服务器用于获取通讯模块发送的受访对象的基本信息、面部视频流、所调取的问题、问题答复语音和所调取的游戏并进行处理,形成心理健康指标档案信息并储存。本发明专利技术提出的基于采集机器人终端的系统、机器人终端、方法及介质,使得心理健康指标采集的过程简单、人力资源投入少、效率高、维度广,且能够提高所采集到的心理健康指标的准确性。提高所采集到的心理健康指标的准确性。提高所采集到的心理健康指标的准确性。

【技术实现步骤摘要】
基于采集机器人终端的系统、机器人终端、方法及介质


[0001]本专利技术涉及心理健康指标采集
,具体涉及一种基于采集机器人终端的系统、机器人终端、方法及介质。

技术介绍

[0002]青春期是儿童发育到成人的重要转折时期,此时的心理健康对于培养独立健全的人格、形成自信自强的精神品质、树立理想信念和生活目标都至关重要。近年来,我国青少年心理健康问题越来越引发社会关注,一些青少年出现焦虑、抑郁等情绪,严重影响了生活和学业,个别甚至发展成精神疾病。因此,如何有效预防青少年心理健康疾病至关重要。
[0003]为了有效预防青少年心理健康疾病,需要对青少年的心理健康指标进行采集。传统的青少年心理健康指标采集方式通常为纸质调查方式或者约谈方式,需要花费大量人力资源和时间,手段较为复杂、采集效率低。此外,采用约谈方式容易引起青少年受访过程产生紧张,从而导致所采集到的心理健康指标不准确的问题。

技术实现思路

[0004]为解决上述问题,本专利技术提出一种基于采集机器人终端的系统、机器人终端、方法及介质,使得心理健康指标采集的过程简单、效率高,且能够提高所采集到的心理健康指标的准确性。
[0005]根据第一方面,一种实施例中提供一种基于采集机器人终端的系统,包括云服务器和一个或多个采集机器人终端;其中:
[0006]所述采集机器人终端包括显示屏、输入部件、摄像头、扬声器、麦克风、通讯模块和处理器;所述显示屏用于显示应用界面信息;所述输入部件用于接收受访对象的输入;所述摄像头用于采集受访对象的面部视频流;所述扬声器用于向受访对象语音播报问题;所述麦克风用于采集受访对象的问题答复语音;所述通讯模块用于采集机器人终端和所述云服务器之间的数据通讯;所述处理器用于获取受访对象通过所述输入部件输入的受访对象的基本信息;所述处理器控制所述摄像头实时采集受访对象的面部视频流;所述处理器调取一预设问题库中的问题,并控制所述扬声器向受访对象语音播报所调取的问题;所述处理器控制所述麦克风采集受访对象的问题答复语音;所述处理器调取一预设游戏库中的游戏,并控制所述显示屏显示所调取的游戏的界面信息,以供受访对象通过所述输入部件和显示屏进行游戏,并且通过所述摄像头采集受访对象在游戏过程中的面部视频流;所述处理器控制所述通讯模块将所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏发送至所述云服务器;
[0007]所述云服务器用于获取所述通讯模块发送的所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏并进行处理,形成心理健康指标档案信息并储存。
[0008]在其中一种可能实现方式中,所述云服务器包括:
[0009]语音识别服务器,用于对所述问题答复语音进行识别处理,获得语音处理数据;
[0010]情绪识别服务器,用于根据所述面部视频流,识别受访对象的内外特征;
[0011]指标收集服务器,用于结合所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音、所述所调取的游戏、所述语音处理数据和所述内外特征,形成心理健康指标档案信息并储存。
[0012]在其中一种可能实现方式中,所述语音处理数据包括问题答复文字、问题答复文字的文字数量和问题回答语速;
[0013]所述对所述问题答复语音进行识别处理,获得语音处理数据,包括:
[0014]所述语音识别服务器将所述问题答复语音转化为所述问题答复文字,并判断所述问题答复文字的文字数量;所述语音识别服务器根据所述问题答复语音判断语音时长;所述语音识别服务器根据所述文字数量和所述语音时长计算所述问题回答语速。
[0015]在其中一种可能实现方式中,所述内外特征包括面部表情、面部微动作、生理特征、生理指标和内心情绪;
[0016]所述根据所述面部视频流,识别受访对象的内外特征,包括:
[0017]所述情绪识别服务器获取所述面部视频流中的图像帧;所述情绪识别服务器根据所述图像帧识别所述面部表情、所述面部微动作、所述生理特征和所述生理指标;所述情绪识别服务器根据所述面部微动作、所述生理特征和所述生理指标,通过深度神经网络计算内心情绪。
[0018]根据第二方面,一种实施例中提供一种采集机器人终端,包括:
[0019]显示屏,用于显示应用界面信息;
[0020]输入部件,用于接收受访对象的输入;
[0021]摄像头,用于采集受访对象的面部视频流;
[0022]扬声器,用于向受访对象语音播报问题;
[0023]麦克风,用于采集受访对象的问题答复语音;
[0024]通讯模块,用于采集机器人终端和一云服务器之间的数据通讯;以及,
[0025]处理器,用于获取受访对象通过所述输入部件输入的受访对象的基本信息;所述处理器控制所述摄像头实时采集受访对象的面部视频流;所述处理器调取一预设问题库中的问题,并控制所述扬声器向受访对象语音播报所调取的问题;所述处理器控制所述麦克风采集受访对象的问题答复语音;所述处理器调取一预设游戏库中的游戏,并控制所述显示屏显示所调取的游戏的界面信息,以供受访对象通过所述输入部件和显示屏进行游戏,并且通过所述摄像头采集受访对象在游戏过程中的面部视频流;所述处理器控制所述通讯模块将所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏发送至所述云服务器,以使所述云服务器对所接收到的数据进行处理,形成心理健康指标档案信息并储存。
[0026]在其中一种可能实现方式中,所述处理器控制所述通讯模块将所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏发送至所述云服务器,以使所述云服务器对所接收到的数据进行处理,形成心理健康指标档案信息并储存,包括:
[0027]所述处理器控制所述通讯模块将所述受访对象的基本信息、所述面部视频流、所
述所调取的问题、所述问题答复语音和所述所调取的游戏发送至所述云服务器,以使得:所述云服务器将所述问题答复语音转化为问题答复文字,并判断所述问题答复文字的文字数量;所述云服务器根据所述问题答复语音判断语音时长;所述云服务器根据所述文字数量和所述语音时长判断问题回答语速;所述云服务器获取所述面部视频流中的图像帧,并根据所述图像帧识别面部表情、面部微动作、生理特征和生理指标;所述云服务器根据所述面部微动作、所述生理特征和所述生理指标,通过深度神经网络计算内心情绪;所述云服务器结合所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音、所述所调取的游戏、所述问题答复文字、所述文字数量、所述问题回答语速、所述面部表情、所述面部微动作、所述生理特征、所述生理指标和所述内心情绪,形成心理健康指标档案信息并储存。
[0028]根据第三方面,一种实施例中提供一种采集心理健康指标的方法,包括:
[0029]获取受访对象的基本信息;
[本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于采集机器人终端的系统,其特征在于,包括云服务器和一个或多个采集机器人终端;其中:所述采集机器人终端包括显示屏、输入部件、摄像头、扬声器、麦克风、通讯模块和处理器;所述显示屏用于显示应用界面信息;所述输入部件用于接收受访对象的输入;所述摄像头用于采集受访对象的面部视频流;所述扬声器用于向受访对象语音播报问题;所述麦克风用于采集受访对象的问题答复语音;所述通讯模块用于采集机器人终端和所述云服务器之间的数据通讯;所述处理器用于获取受访对象通过所述输入部件输入的受访对象的基本信息;所述处理器控制所述摄像头实时采集受访对象的面部视频流;所述处理器调取一预设问题库中的问题,并控制所述扬声器向受访对象语音播报所调取的问题;所述处理器控制所述麦克风采集受访对象的问题答复语音;所述处理器调取一预设游戏库中的游戏,并控制所述显示屏显示所调取的游戏的界面信息,以供受访对象通过所述输入部件和显示屏进行游戏,并且通过所述摄像头采集受访对象在游戏过程中的面部视频流;所述处理器控制所述通讯模块将所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏发送至所述云服务器;所述云服务器用于获取所述通讯模块发送的所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音和所述所调取的游戏并进行处理,形成心理健康指标档案信息并储存。2.如权利要求1所述的基于采集机器人终端的系统,其特征在于,所述云服务器包括:语音识别服务器,用于对所述问题答复语音进行识别处理,获得语音处理数据;情绪识别服务器,用于根据所述面部视频流,识别受访对象的内外特征;指标收集服务器,用于结合所述受访对象的基本信息、所述面部视频流、所述所调取的问题、所述问题答复语音、所述所调取的游戏、所述语音处理数据和所述内外特征,形成心理健康指标档案信息并储存。3.如权利要求2所述的基于采集机器人终端的系统,其特征在于,所述语音处理数据包括问题答复文字、问题答复文字的文字数量和问题回答语速;所述对所述问题答复语音进行识别处理,获得语音处理数据,包括:所述语音识别服务器将所述问题答复语音转化为所述问题答复文字,并判断所述问题答复文字的文字数量;所述语音识别服务器根据所述问题答复语音判断语音时长;所述语音识别服务器根据所述文字数量和所述语音时长计算所述问题回答语速。4.如权利要求2所述的基于采集机器人终端的系统,其特征在于,所述内外特征包括面部表情、面部微动作、生理特征、生理指标和内心情绪;所述根据所述面部视频流,识别受访对象的内外特征,包括:所述情绪识别服务器获取所述面部视频流中的图像帧;所述情绪识别服务器根据所述图像帧识别所述面部表情、所述面部微动作、所述生理特征和所述生理指标;所述情绪识别服务器根据所述面部微动作、所述生理特征和所述生理指标,通过深度神经网络计算内心情绪。5.一种采集机器人终端,其特征在于,包括:显示屏,用于显示应用界面信息;输入部件,用于接收受访对象的输入;
摄像头,用于采集受访对象的面部视频流;扬声器,用于向受访对象语音播报问题;麦克风,用于采集受访对象的问题答复语音;通讯模块,用于采集机器人终端和一云服务器之间的数据通讯;以及,处理器,用于获取受访对象通过所述输入部件输入的受访对象的基本信息;所述处理器控制所述摄像头实时采集受访对象的面部视频流;所述处理器调取一预设问题库中的问题,并控制所述扬声器向受访对象语音播报所调取的问题;所述处理器控制所述麦克风采集受访对象的问题答复语音;所述处理器调取一预设游戏库中的游戏,并控制所述显示屏显示所调取的游戏的界面信息,以供受访对象通过所述输入部件和显示屏进行游...

【专利技术属性】
技术研发人员:秦基伟徐明裴卫斌林大镰员晓毅
申请(专利权)人:深圳力维智联技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1