一种具有视觉识别的语音学习方法、装置及系统制造方法及图纸

一种具有视觉识别的语音学习方法、装置和系统，该装置包括信息处理单元，图像获取单元，音频输入单元，音频输出单元，手写显示单元，手写轨迹获取单元，存储单元，无线通信单元，本发明专利技术直接拍摄学习资料的画面获取学习资料，操作简便、便于升级扩容；减少了用户对显示屏的依赖，帮助学生提高学习效率的同时，保护青少年的视力；使得让长辈也可以帮助孩子学习；家长可以直接通过APP在服务器上查询学习进度和评分；在一台设备上综合实现了多种功能，操作简便。

A speech learning method, device and system with visual recognition

【技术实现步骤摘要】
一种具有视觉识别的语音学习方法、装置及系统
本专利技术涉及儿童自主学习领域，特别的涉及一种通过视觉识别的方式获取学习资料的语音学习方法、装置及系统。
技术介绍
随着互联网、人工智能的发展，基于终端的智能学习工具越来越多，而语言学习是学生学习中的一大难点，辅助学习的工具很多。现有的学习工具包括电脑、平板、手机等智能终端，在这些设备上安装各类学习APP后，APP软件将要学习的内容显示到屏幕上，学生通过触屏互动学习；这种类设备除了可以装学习软件外，同样可以安装娱乐软件，不易管理，容易被当成娱乐工具使用，长时间使用容易伤害学生视力。另外，一种学习工具是扫读笔，是用光学扫描头将学习的内容扫描到平板或者本身带有的显示屏上；也需要借助于电子显示屏才能发挥学习作用，长时间看电子显示屏则是导致青少年近视的主要原因。而通过MP3没有图像显示屏，但是只能听声音功能单一，不能联网没有互动。通过点读笔，使用时需要在点读的书册刷上对应的OID码才能准确的播放语音，灵活性差、缺少互动，学习过程中难免枯燥。此外，很多家庭经常由爷爷奶奶辈的长辈负责孩子的学习，老人不会使本文档来自技高网...

【技术保护点】
1.一种具有视觉识别的语音学习方法,其特征在于，包括如下步骤：/n图像获取步骤S110:语音学习装置拍摄获取需要学习的绘本或者卡片的全部或者部分图像信息；/n学习资料获取步骤S120：语音学习装置根据所述图像信息从本地的存储单元或者远端的服务器中获取与所述图像信息关联的学习信息；/n学习资料播放步骤S130：语音学习装置根据所述学习资料播放待学习的语音，以便用户在听到语音时进行拼读和/或书写；/n学习信息获取步骤S140：语音学习装置采集用户的拼读语音信息，和/或用户输入的书写轨迹，并在手写显示单元上显示用户的书写内容；/n评分步骤S150：对获取到的用户的拼读语音信息，和/或用户输入的书写轨...

【技术特征摘要】
1.一种具有视觉识别的语音学习方法,其特征在于，包括如下步骤：
图像获取步骤S110:语音学习装置拍摄获取需要学习的绘本或者卡片的全部或者部分图像信息；
学习资料获取步骤S120：语音学习装置根据所述图像信息从本地的存储单元或者远端的服务器中获取与所述图像信息关联的学习信息；
学习资料播放步骤S130：语音学习装置根据所述学习资料播放待学习的语音，以便用户在听到语音时进行拼读和/或书写；
学习信息获取步骤S140：语音学习装置采集用户的拼读语音信息，和/或用户输入的书写轨迹，并在手写显示单元上显示用户的书写内容；
评分步骤S150：对获取到的用户的拼读语音信息，和/或用户输入的书写轨迹在本地进行评分或者发送到远端的服务器进行评分。


2.根据权利要求1所述的具有视觉识别的语音学习方法,其特征在于：
还包括AI聊天步骤S160，所述语音学习装置采集用户的语音与远程的服务器进行AI聊天。


3.一种具有视觉识别的语音学习装置，其特征在于，包括：
图像获取单元，用于拍摄获取需要学习的绘本或者卡片的全部或者部分图像信息；
信息处理单元，用于根据所述图像信息从本地的存储单元获取与所述图像信息关联的学习信息，或者用于使得无线通信单元根据所述图像信息从远端的服务器中获取与所述图像信息关联的学习信息；
音频输出单元，用于根据所述学习资料播放待学习的语音，以便用户在听到语音时进行拼读；
音频输入单元，用于采集用户的拼读语音信息；
手写显示单元，设置在手写轨迹获取单元的上部，用于显示用户书写的内容；
手写轨迹获取单元，设置在手写显示单元的底部，用于获取用户书写的轨迹；
所述信息处理单元能够对获取到的用户的拼读语音信息，和/或用户输入的书写轨迹进行评分，然后通过所述无线通信单元将分数传送至远端的服务器；或者所述无线通...

【专利技术属性】
技术研发人员：陈惠锋，朱建军，邓开琪，
申请(专利权)人：深圳瑞诺信息科技有限公司，
类型：发明
国别省市：广东;44