【技术实现步骤摘要】
本专利技术涉及智能教育，具体是涉及基于图像传感器识别文本的互动式教育方法及智能教具。
技术介绍
1、目前有诸多以幼儿与儿童为对象、辅助语言学习的各种教具。有些教具可以通过让学习者将韩文元辅音积木或英文字母积木结合到方格学习板的方式提供辅助学习的功能。但需要结合积木的教具存在的问题是幼儿或儿童可能很难将积木正确地结合到学习板上准确的位置，以及需要大量的传感器来确定积木是否结合等，因此制作成本很高。
技术实现思路
1、为解决上述技术问题，提供基于图像传感器识别文本的互动式教育方法及智能教具，本技术方案解决了上述
技术介绍
中提出的需要结合积木的教具存在的问题是幼儿或儿童可能很难将积木正确地结合到学习板上准确的位置，以及需要大量的传感器来确定积木是否结合等，因此制作成本很高的问题。
2、为达到以上目的，本专利技术采用的技术方案为：
3、基于图像传感器识别文本的互动式教育方法，包括：
4、获取白板图像数据，所述白板图像数据包括显示英文字母和英文字母的韩文读音的多个字母积木图像数据；
5、对白板图像数据进行处理、识别，获取图像识别结果；
6、根据图像识别结果，获取多个所述字母积木排列结构中的英文字母，并对英文字母进行输出显示；
7、其中，多个所述字母积木排列结构中的英文字母进行识别，判断多个所述字母积木排列结构中的英文字母是否构成英文单词；
8、若所述排列结构中的英文字母构成英文单词，则输出所述英文单词的标准发音
9、获取电子笔手写图像，基于字符识别模型，对电子笔手写图像进行识别，获取手写英文字母文本；
10、判断手写英文字母文本与多个所述字母积木排列结构中的英文字母是否相同，若相同则输出正确语音，若不同则输出错误语音；
11、获取学习内容卡上学习内容图像显示的英文字母，判断学习内容卡上学习内容图像显示的英文字母与多个所述字母积木排列结构中的英文字母是否相同，若相同则输出正确语音，若不同则输出错误语音；
12、其中，若学习内容卡上学习内容图像显示的英文字母、手写英文字母文本和多个所述字母积木排列结构中的英文字母均匹配，则输出正确语音，若不同则输出错误语音。
13、优选的，所述获取电子笔手写图像，基于字符识别模型，对电子笔手写图像进行识别，获取手写英文字母文本包括：
14、获取电子笔手写注册图像，所述电子笔手写注册图像为学习者重复书写的从字母a到字母z的电子笔手写英文笔迹图像；
15、将所述电子笔手写注册图像保存为手势图像数据集；
16、对所述电子笔手写注册图像进行处理，获取电子笔手写注册图像特征信息；
17、根据电子笔手写注册图像特征信息，对深度学习模型进行训练，获取字符识别模型；
18、基于字符识别模型，对电子笔手写图像进行识别，获取字符识别数据，所述字符识别数据包括手写为字母文本信息。
19、优选的，所述获取学习内容卡上学习内容图像显示的英文字母，判断学习内容卡上学习内容图像显示的英文字母与多个所述字母积木排列结构中的英文字母是否相同还包括：
20、根据学习内容卡上的学习内容图像，输出提示语音；
21、基于触摸信号，输出导向光；
22、获取方格图案，所述方格图案为放置多个字母积木的白板区；
23、根据导向光和方格图案，输出至少能够暗示一部分上述学习内容图像所对应的英文单词。
24、优选的，所述判断手写英文字母文本与多个所述字母积木排列结构中的英文字母是否相同包括：
25、根据导向光和方格图案，对多个字母积木的放置状态和上述手写文本的填写状态进行识别；
26、输出显示上述多个字母积木的放置状态和上述手写文本的填写状态的评价结果。
27、优选的，所述根据导向光和方格图案，对多个字母积木的放置状态和上述手写文本的填写状态进行识别，还包括：
28、根据导向光和方格图案，对多个字母积木状态进行识别；
29、根据多个字母积木状态识别结果，获取多个字母位置变化或旋转状态；
30、基于多个字母位置变化或旋转状态，对多个字母积木排列结构中的英文字母进行识别。
31、进一步的，提出基于图像传感器识别文本的互动式智能教具，用于实现如上述的教育方法，包括：
32、控制器，所述控制器用于通过从拍摄图像中提取英文字母，并判断英文字母的排列顺序是否与特定的英文单词相符。多个字母积木所表示的英文字母具有指定的形状，因此根据字母形状的旋转状态可以识别英文字母；
33、字母积木，所述字母积木为学习者能够用手握的大小和形状，并且可以平稳地置于白板区的底部的结构组成，用于表示英文字母及英文字母的韩文读音；
34、白板区，所述白板区包含识别电子手写笔的输入的手写文字的触摸面板，用于放置多个字母积木和通过手写笔手写文本；
35、图像传感器，所述图像传感器包含用于生成拍摄图像的照相机装置，用于获取白板图像数据和电子笔手写图像；
36、扬声器，所述扬声器用于输出英文字母的标准发音、英文的单词的读音和对错语言；
37、手写笔，所述手写笔包含电子手写笔，用于英语文本书写；
38、学习内容卡，所述学习内容卡用于显示学习内容图像；
39、功能按键，所述功能按键用于对功能进行选择。
40、可选的，所述控制器包含内存和处理器，内存可以具有存储由互动式智能教具处理的各种指令、计算机程序、手机应用程序或数据的结构；
41、通过配置为根据导向光和方格图案评价多个字母积木的放置状态和手写文本的填充状态，向学习者显示放置状态和填充状态的评价结果；
42、通过控制扬声器，以便在学习内容图像显示的英文单词与布局结构中英文字母构成的英文单词和手写文本都匹配的情况下，输出答对的语音；
43、通过配置为通过学习者注册的过程，将学习者输入的英文字母笔迹进行注册后，自定义字符识别模型，并根据已完成自定义的字符识别模型识别手写文本内容。
44、可选的，所述互动式智能教具可以包含插入到互动式智能教具中以向学习者显示学习内容图像的学习内容卡，控制器可以包含扬声器，以便在学习内容图像显示的英文单词与排列结构的英文字母组成的英文单词相匹配的情况下输出答对的语音。
45、可选的，所述互动式智能教具还可以包含置于互动式智能教具上的提示按钮；控制器在学习者按下提示按钮时，控制扬声器输出提示语音；以及控制上述触摸板输出导向光，以便利用方格图案输出至少能够暗示一部分学习内容图像所对应的英文单词。
46、可选的，所述互动式智能教具包括计算机可读存储介质，其中包含硬盘、软盘和磁带等磁介质(magnetic media)、cd-本文档来自技高网...
【技术保护点】
1.基于图像传感器识别文本的互动式教育方法，其特征在于，包括：
2.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述获取电子笔手写图像，基于字符识别模型，对电子笔手写图像进行识别，获取手写英文字母文本包括：
3.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述获取学习内容卡上学习内容图像显示的英文字母，判断学习内容卡上学习内容图像显示的英文字母与多个所述字母积木排列结构中的英文字母是否相同还包括：
4.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述判断手写英文字母文本与多个所述字母积木排列结构中的英文字母是否相同包括：
5.根据权利要求4所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述根据导向光和方格图案，对多个字母积木的放置状态和上述手写文本的填写状态进行识别，还包括：
6.基于图像传感器识别文本的互动式智能教具，用于实现如权利要求1-6任一项所述的互动式教育方法，其特征在于，包括：
7.根据权利要求7所述的
8.通过控制扬声器可以包含插入到互动式智能教具中以向学习者显示学习内容图像的学习内容卡可以包含扬声器，以便在学习内容图像显示的英文单词与排列结构的英文字母组成的英文单词相匹配的情况下输出答对的语音。
9.根据权利要求7所述的基于图像传感器识别文本的互动式智能教具，其特征在于，所述互动式智能教具还可以包含置于互动式智能教具上的提示按钮；控制器在学习者按下提示按钮时，控制扬声器输出提示语音；以及控制上述触摸板输出导向光，以便利用方格图案输出至少能够暗示一部分学习内容图像所对应的英文单词。
10.根据权利要求7所述的基于图像传感器识别文本的互动式智能教具，其特征在于，所述互动式智能教具包括计算机可读存储介质，其中包含硬盘、软盘和磁带等磁介质(magnetic media)、CD-ROM和DVD等光记录介质(optical media)、软盘(floptical disk)等磁光介质(magneto-optical media)，以及ROM、RAM、闪存等专门配置的硬件设备来存储和运行计算机程序指令。计算机程序指令可以包含高级语言代码，可以使用编译器生成的机器代码和解释器等由计算机执行。
...【技术特征摘要】
1.基于图像传感器识别文本的互动式教育方法，其特征在于，包括：
2.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述获取电子笔手写图像，基于字符识别模型，对电子笔手写图像进行识别，获取手写英文字母文本包括：
3.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述获取学习内容卡上学习内容图像显示的英文字母，判断学习内容卡上学习内容图像显示的英文字母与多个所述字母积木排列结构中的英文字母是否相同还包括：
4.根据权利要求1所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述判断手写英文字母文本与多个所述字母积木排列结构中的英文字母是否相同包括：
5.根据权利要求4所述的基于图像传感器识别文本的互动式教育方法，其特征在于，所述根据导向光和方格图案，对多个字母积木的放置状态和上述手写文本的填写状态进行识别，还包括：
6.基于图像传感器识别文本的互动式智能教具，用于实现如权利要求1-6任一项所述的互动式教育方法，其特征在于，包括：
7.根据权利要求7所述的基于图像传感器识别文本的互动式智能教具，其特征在于，所述控制器包含内存和处理器，内存可以具有存储由互动...
【专利技术属性】
技术研发人员：安承寅，安亨模，
申请(专利权)人：深圳市乐高天科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。