一种听写进度的控制方法及电子设备技术

本发明专利技术实施例涉及教育技术领域，公开了一种听写进度的控制方法及电子设备，该方法包括：在进行听写操作时获取摄像头拍摄到的第一实时面部图像；通过预设面部情绪模型识别第一实时面部图像的面部情绪，并获得第一实时面部图像的面部情绪对应的第一心情状态信息，该第一心情状态信息用于指示用户听写时的愉悦度；根据第一心情状态信息调节听写操作时的语音播报速度，以控制听写进度。实施本发明专利技术实施例，能够根据面部情绪调节听写进度，从而提高听写效率和用户体验感。

A Method of Controlling Dictation Progress and Electronic Equipment

The embodiment of the present invention relates to the field of educational technology, and discloses a control method and an electronic device for dictation progress. The method includes: acquiring the first real-time facial image captured by a camera during dictation operation; recognizing the facial emotion of the first real-time facial image by presupposing a facial emotion model, and obtaining the first mood corresponding to the facial emotion of the first real-time facial image. The first mood state information is used to indicate the user's pleasure in dictation. According to the first mood state information, the speed of voice broadcast during dictation operation is adjusted to control the dictation progress. The embodiment of the present invention can adjust dictation progress according to facial emotion, thereby improving dictation efficiency and user experience.

【技术实现步骤摘要】
一种听写进度的控制方法及电子设备
本专利技术涉及教育
，尤其涉及一种听写进度的控制方法及电子设备。
技术介绍
随着科学技术的发展，学生使用电子设备(如家教机)进行学习已经越来越普遍。其中，学生可以使用电子设备进行听写训练：在听写过程中，电子设备播放学生选取的内容，学生根据电子设备播放的内容进行书写。在实践中发现，学生在听写时可能需要一段思考时间，才能书写出播放的内容。因此，学生往往需要控制听写进度来配合书写速度，以免错过后续的播放内容。但是，目前学生在听写过程中，只能通过点击虚拟按键来控制听写的进度，这样会降低听写效率和用户体验感。
技术实现思路
本专利技术实施例公开了一种听写进度的控制方法及电子设备，能够根据面部情绪调节听写进度，从而提高听写效率和用户体验感。本专利技术实施例第一方面公开一种听写进度的控制方法，所述方法包括：电子设备在进行听写操作时获取摄像头拍摄到的第一实时面部图像；所述电子设备通过预设面部情绪模型识别所述第一实时面部图像的面部情绪，并获得所述第一实时面部图像的面部情绪对应的第一心情状态信息；所述第一心情状态信息用于指示用户听写时的愉悦度；所述电子设备根据所述第一心情状态信息调节听写操作时的语音播报速度，以控制听写进度；其中，当所述用户听写时的愉悦度大于预设愉悦度阈值时，所述电子设备提高所述语音播报速度；当所述用户听写时的愉悦度小于预设愉悦度阈值时，所述电子设备降低所述语音播报速度。作为一种可选的实施方式，在本专利技术实施例第一方面中，在进行听写操作之前，所述方法还包括：所述电子设备播放若干测试语音，并获取所述摄像头在播放每一所述测试语音时拍摄到的第二实时面部图像，以获得与所述若干测试语音一一对应的若干第二实时面部图像；所述电子设备通过所述预设面部情绪模型识别每一第二实时面部图像的面部情绪，以获得所述每一第二实时面部图像的面部情绪对应的第二心情状态信息；所述第二心情状态信息用于指示用户在听测试语音时的愉悦度；所述电子设备从若干第二心情状态信息中确定出所述用户在听测试语音时的愉悦度最大的第二心情状态信息作为目标心情状态信息，并从所述若干第二实时面部图像中确定出与所述目标心情状态信息对应的目标图像；所述电子设备从所述若干测试语音中确定出与所述目标图像对应的测试语音作为目标语音；所述电子设备在进行听写操作时，以所述目标语音的发音特征播报听写操作的听写内容。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述方法还包括：所述电子设备获取用户在触摸所述电子设备的触控屏时在所述触控屏上的触摸点的实时移动速度；所述电子设备检测所述触摸点的实时移动速度对应的书写速度与所述语音播报速度是否匹配；如果不匹配，所述电子设备根据所述书写速度调节所述语音播报速度，以控制听写进度；其中，当所述书写速度大于所述语音播报速度时，所述电子设备提高所述语音播报速度；当所述书写速度小于所述语音播报速度时，所述电子设备降低所述语音播报速度。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述方法还包括：在检测到听写操作结束时，所述电子设备根据所述触摸点的移动轨迹获取用户在所述触控屏上的书写轨迹，并识别所述书写轨迹对应的书写内容；所述电子设备将所述听写操作的听写内容与所述书写轨迹对应的书写内容进行比对，获得对所述书写内容的批改结果和听写分数，并输出所述批改结果和所述听写分数；其中，所述听写分数为对所述书写内容的批改结果进行评分获得的分数。作为一种可选的实施方式，在本专利技术实施例第一方面中，在所述电子设备输出所述批改结果和所述听写分数之后，所述方法还包括：所述电子设备判断所述听写分数是否小于预设分数；如果是，所述电子设备对所述听写内容作标记，获得标记听写内容；所述电子设备设置复习周期，并基于所述复习周期为用户推送所述标记听写内容以引导用户对所述标记听写内容进行复习。本专利技术实施例第二方面公开一种电子设备，所述电子设备包括：第一获取单元，用于在进行听写操作时获取摄像头拍摄到的第一实时面部图像；第一识别单元，用于通过预设面部情绪模型识别所述第一实时面部图像的面部情绪，并获得所述第一实时面部图像的面部情绪对应的第一心情状态信息；所述第一心情状态信息用于指示用户听写时的愉悦度；第一调节单元，用于根据所述第一心情状态信息调节听写操作时的语音播报速度，以控制听写进度；其中，当所述用户听写时的愉悦度大于预设愉悦度阈值时，所述电子设备提高所述语音播报速度；当所述用户听写时的愉悦度小于预设愉悦度阈值时，所述电子设备降低所述语音播报速度。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述电子设备还包括：第二获取单元，用于在进行听写操作之前，播放若干测试语音，并获取所述摄像头在播放每一所述测试语音时拍摄到的第二实时面部图像，以获得与所述若干测试语音一一对应的若干第二实时面部图像；第二识别单元，用于通过所述预设面部情绪模型识别每一第二实时面部图像的面部情绪，以获得所述每一第二实时面部图像的面部情绪对应的第二心情状态信息；所述第二心情状态信息用于指示用户在听测试语音时的愉悦度；第一确定单元，用于从若干第二心情状态信息中确定出所述用户在听测试语音时的愉悦度最大的第二心情状态信息作为目标心情状态信息，并从所述若干第二实时面部图像中确定出与所述目标心情状态信息对应的目标图像；第二确定单元，用于从所述若干测试语音中确定出与所述目标图像对应的测试语音作为目标语音；播放单元，用于在进行听写操作时，以所述目标语音的发音特征播报听写操作的听写内容。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述电子设备还包括：第三获取单元，用于获取用户在触摸所述电子设备的触控屏时在所述触控屏上的触摸点的实时移动速度；检测单元，用于检测所述触摸点的实时移动速度对应的书写速度与所述语音播报速度是否匹配；第二调节单元，用于在所述检测单元检测出所述触摸点的实时移动速度对应的书写速度与所述语音播报速度不匹配时，根据所述书写速度调节所述语音播报速度，以控制听写进度；其中，当所述书写速度大于所述语音播报速度时，所述电子设备提高所述语音播报速度；当所述书写速度小于所述语音播报速度时，所述电子设备降低所述语音播报速度。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述电子设备还包括：第三识别单元，用于在检测到听写操作结束时，根据所述触摸点的移动轨迹获取用户在所述触控屏上的书写轨迹，并识别所述书写轨迹对应的书写内容；比对单元，用于将所述听写操作的听写内容与所述书写轨迹对应的书写内容进行比对，获得对所述书写内容的批改结果和听写分数，并输出所述批改结果和所述听写分数；其中，所述听写分数为对所述书写内容的批改结果进行评分获得的分数。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述电子设备还包括：判断单元，用于在所述比对单元输出所述批改结果和所述听写分数之后，判断所述听写分数是否小于预设分数；标记单元，用于在所述判断单元判断出所述听写分数小于预设分数时，对所述听写内容作标记，获得标记听写内容；复习单元，用于设置复习周期，并基于所述复习周期为用户推送所述标记听写内容以引导用户对所述标记听写内容进行复习。本专利技术实施例第三方面公开一种电子设备，包括：存储有可执行程序代码的存储器；与所述存储器耦合的本文档来自技高网...

【技术保护点】
1.一种听写进度的控制方法，其特征在于，所述方法包括：电子设备在进行听写操作时获取摄像头拍摄到的第一实时面部图像；所述电子设备通过预设面部情绪模型识别所述第一实时面部图像的面部情绪，并获得所述第一实时面部图像的面部情绪对应的第一心情状态信息；所述第一心情状态信息用于指示用户听写时的愉悦度；所述电子设备根据所述第一心情状态信息调节听写操作时的语音播报速度，以控制听写进度；其中，当所述用户听写时的愉悦度大于预设愉悦度阈值时，所述电子设备提高所述语音播报速度；当所述用户听写时的愉悦度小于预设愉悦度阈值时，所述电子设备降低所述语音播报速度。

【技术特征摘要】
1.一种听写进度的控制方法，其特征在于，所述方法包括：电子设备在进行听写操作时获取摄像头拍摄到的第一实时面部图像；所述电子设备通过预设面部情绪模型识别所述第一实时面部图像的面部情绪，并获得所述第一实时面部图像的面部情绪对应的第一心情状态信息；所述第一心情状态信息用于指示用户听写时的愉悦度；所述电子设备根据所述第一心情状态信息调节听写操作时的语音播报速度，以控制听写进度；其中，当所述用户听写时的愉悦度大于预设愉悦度阈值时，所述电子设备提高所述语音播报速度；当所述用户听写时的愉悦度小于预设愉悦度阈值时，所述电子设备降低所述语音播报速度。2.根据权利要求1所述的方法，其特征在于，在进行听写操作之前，所述方法还包括：所述电子设备播放若干测试语音，并获取所述摄像头在播放每一所述测试语音时拍摄到的第二实时面部图像，以获得与所述若干测试语音一一对应的若干第二实时面部图像；所述电子设备通过所述预设面部情绪模型识别每一第二实时面部图像的面部情绪，以获得所述每一第二实时面部图像的面部情绪对应的第二心情状态信息；所述第二心情状态信息用于指示用户在听测试语音时的愉悦度；所述电子设备从若干第二心情状态信息中确定出所述用户在听测试语音时的愉悦度最大的第二心情状态信息作为目标心情状态信息，并从所述若干第二实时面部图像中确定出与所述目标心情状态信息对应的目标图像；所述电子设备从所述若干测试语音中确定出与所述目标图像对应的测试语音作为目标语音；所述电子设备在进行听写操作时，以所述目标语音的发音特征播报听写操作的听写内容。3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：所述电子设备获取用户在触摸所述电子设备的触控屏时在所述触控屏上的触摸点的实时移动速度；所述电子设备检测所述触摸点的实时移动速度对应的书写速度与所述语音播报速度是否匹配；如果不匹配，所述电子设备根据所述书写速度调节所述语音播报速度，以控制听写进度；其中，当所述书写速度大于所述语音播报速度时，所述电子设备提高所述语音播报速度；当所述书写速度小于所述语音播报速度时，所述电子设备降低所述语音播报速度。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：在检测到听写操作结束时，所述电子设备根据所述触摸点的移动轨迹获取用户在所述触控屏上的书写轨迹，并识别所述书写轨迹对应的书写内容；所述电子设备将所述听写操作的听写内容与所述书写轨迹对应的书写内容进行比对，获得对所述书写内容的批改结果和听写分数，并输出所述批改结果和所述听写分数；其中，所述听写分数为对所述书写内容的批改结果进行评分获得的分数。5.根据权利要求4所述的方法，其特征在于，在所述电子设备输出所述批改结果和所述听写分数之后，所述方法还包括：所述电子设备判断所述听写分数是否小于预设分数；如果是，所述电子设备对所述听写内容作标记，获得标记听写内容；所述电子设备设置复习周期，并基于所述复习周期为用户推送所述标记听写内容以引导用户对所述标记听写内容进行复习。6.一种电子设备，其特征在于，所述电子设备包括：第一获取单元，用于在进行听写操作时获取摄像头拍摄到的第一实时...

【专利技术属性】
技术研发人员：韦肖莹，
申请(专利权)人：广东小天才科技有限公司，
类型：发明
国别省市：广东,44