一种协助用户解决问题的交互方法、智能装置及系统制造方法及图纸

本发明专利技术属于智能教育设备领域，公开了一种协助用户解决问题的交互方法、智能装置及系统；其方法包括：采集用户的语音数据，对语音数据进行语音识别，识别出用户所提出的问题；在摄像区域内获取目标图像，对目标图像进行识别，识别出用户在书本上所指定的区域；结合用户所提出的问题以及在书本上所指定的区域，搜索出用户针对书本上指定区域所提出问题的答案；在投影区域投影用户针对书本上指定区域所提出问题的答案。本发明专利技术采用拍照+语音的方式来帮助学生解决作业问题，不仅脱离了手机，避免出现学生以作业为由借机玩手机而耽误学习；还更符合学生的学习场景。另外，即使学生口述不清楚问题，也可以帮助学生解决作业问题。

【技术实现步骤摘要】
一种协助用户解决问题的交互方法、智能装置及系统
本专利技术属于智能教育设备
，特别涉及一种协助用户解决问题的交互方法、智能装置及系统。
技术介绍
学生在完成作业时，时常会遇到各种各样的问题。当学生遇到各种问题时，一方面，很多家长碍于工作压力，根本无法辅导孩子完成课后作业。另一方面，即使家长有时间辅导孩子学习，也会经常遇到一时半会难以解决的问题。随着科学技术的发展，市面上出现了电子设备，例如手机、平板电脑、学习平板等，帮助学生解决作业中遇到的问题。一种方式是利用电子设备对着书本拍摄照片后，搜索出问题的答案；另一种方式是对着电子设备说出问题，搜索出问题的答案。以上帮助学生解决作业问题的方式，存在以下缺陷：(一)脱离学生的作业场景，在额外的手机或平板电脑上进行查询和查看。(二)脱离不了手机、平板电脑，学生会以作业为由借机玩手机或平板电脑，耽误学习。(三)在对着手机或平板电脑说出问题时，若学生表达不清楚的问题，则没办法帮助学生解决作业问题。
技术实现思路
本专利技术的目的是提供一种协助用户解决问题的交互方法、智能装置及系统，不仅脱离了手机、平板电脑，避免出现学生以作业为由借机玩手机或平板电脑，耽误学习；还更符合学生的学习场景。另外，即使学生口述不清楚问题，也可以帮助学生解决作业问题。本专利技术提供的技术方案如下：本专利技术提供一种协助用户解决问题的交互方法，包括：采集用户的语音数据，对所述语音数据进行语音识别，识别出所述用户所提出的问题；在摄像区域内获取目标图像，对所述目标图像进行识别，识别出所述用户在书本上所指定的区域；结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案；在投影区域投影所述用户针对书本上指定区域所提出问题的答案。优选的，所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案之前还包括：提示用户选择所述答案的显示模式，所述显示模式包括屏幕显示、投影显示；所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案具体包括：当用户选择所述答案的显示模式为投影显示时，在投影区域投影所述用户针对书本上指定区域所提出问题的答案。优选的，所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案之前还包括：根据所述答案对应的预设显示模式为投影显示时，将所述显示模式切换至所述投影显示。优选的，还包括：当所述显示模式为屏幕显示时，在显示屏显示所述用户针对书本上指定区域所提出问题的答案；当在显示屏显示的答案中含有关键词时，提示用户针对所述关键词相关知识选择投影显示；当用户针对所述关键词相关知识选择投影显示时，在投影区域投影所述用户针对所述关键词选择的相关知识。优选的，所述的根据所述答案对应的预设显示模式为投影显示时，将所述显示模式切换至所述投影显示之前还包括：统计分析各个用户针对每个学科答案所采用的显示模式，生成一张默认显示模式表，所述默认显示模式表包括每个学科答案的预设显示模式；或；用户自定义每个学科答案对应的显示模式，生成一张自定义显示模式表，所述自定义显示模式表包括每个学科答案的预设显示模式。进一步优选的，所述的结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案具体包括：结合用户所提出的问题以及在书本上所指定的区域，分析出所述用户针对书本上指定区域所提出问题的类型；针对用户对书本上指定区域提出的不同类型问题，采用不同方式从书本上指定区域中提取出提问对象；结合用户所提出的问题以及提问对象，搜索出用户针对书本上指定区域所提出问题的答案。本专利技术还提供一种智能装置，包括：语音单元，用于采集用户的语音数据，对所述语音数据进行语音识别，识别出所述用户所提出的问题；摄像单元，用于在摄像区域内获取目标图像，对所述目标图像进行识别，识别出所述用户在书本上所指定的区域；处理单元，分别与所述语音单元、摄像单元连接，用于结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案；投影单元，与所述处理单元连接，用于投影所述用户针对书本上指定区域所提出问题的答案。优选的，当所述智能装置为一体式智能台灯时，所述智能台灯包括台灯底座、连接杆、台灯头部；所述摄像单元中的摄像头、所述投影单元中的投影仪器件分别设置在所述台灯头部，且所述摄像头的摄像方向朝向所述台灯底座一侧；所述语音单元中的麦克风、所述处理单元分别设置在所述台灯底座上。本专利技术还提供一种协助用户解决问题的交互系统，包括相互通信连接的智能装置和服务器，系统还包括：麦克风，安装在所述智能装置上，用于采集用户的语音数据；摄像头，安装在所述智能装置上，用于在摄像区域内获取目标图像；语音识别模块，安装在所述服务器上，用于对所述语音数据进行语音识别，识别出所述用户所提出的问题；图像识别模块，安装在所述服务器上，用于对所述目标图像进行识别，识别出所述用户在书本上所指定的区域；处理模块，安装在所述服务器上，与所述语音识别模块、图像识别模块连接，用于结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案；投影模块，安装在所述智能装置上，用于投影所述用户针对书本上指定区域所提出问题的答案。优选的，当所述智能装置为一体式智能台灯时，所述智能台灯包括台灯底座、连接杆、台灯头部；所述摄像头、所述投影模块分别设置在所述台灯头部，且所述摄像头的摄像方向朝向所述台灯底座一侧；所述麦克风设置在所述台灯底座上。与现有技术相比，本专利技术提供的一种协助用户解决问题的交互方法、智能装置及系统具有以下有益效果：1、本专利技术中拍照+语音的方式来帮助学生解决作业问题，不仅脱离了手机、平板电脑，避免出现学生以作业为由借机玩手机或平板电脑，耽误学习；还更符合学生的学习场景。另外，即使学生口述不清楚问题，也可以帮助学生解决作业问题。同时，在利用投影方式显示答案时，相对于显示屏来说，投影区域明显大于显示屏显示区域；具有一定的护眼效果。2、本专利技术针对不同场景或不同学科，学生可以随意手动选择是投影显示，还是屏幕显示；满足了不同场景或不同学科需求，不仅提高了学生的互动性，还提高了学生的体验感。3、本专利技术可以采用多种方式定义每个学科答案的显示模式，使得每个学科答案的显示模式为最佳；以及使得每个学科答案的显示模式更加符合自身的学习习惯，具有使得显示模式具有个性化。4、本专利技术中屏幕显示和投影显示相互结合，能够提高显示模式的灵活性，更符合各个学生阶段的各种学习场景。附图说明下面将以明确易懂的方式，结合附图说明优选实施方式，对一种协助用户解决问题的交互方法、智能装置及系统的上述特性、技术特征、优点及其实现方式予以进一步说明。图1是本专利技术一种协助用户解决问题的交互方法的流程示意图；图2是本专利技术又一种协助用户解决问题的交互方法的流程示意图；图3是本专利技术另一种协助用户解决问题的交互方法的流程示意图；图4是本专利技术再一种协助用户解决问题的交互方法的流程示意图；图5是本专利技术又一种协助用户解决问题的交互方法的流程示意图；图6是本专利技术一种智能装置的结构示意框图；图7是本专利技术一种智能装置的结构示意图；图8是本专利技术一种协助用户解决问题的交互系统的结构示意框图；附图标号说明：10—智能装置11—语音本文档来自技高网...

【技术保护点】
1.一种协助用户解决问题的交互方法，其特征在于，包括：采集用户的语音数据，对所述语音数据进行语音识别，识别出所述用户所提出的问题；在摄像区域内获取目标图像，对所述目标图像进行识别，识别出所述用户在书本上所指定的区域；结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案；在投影区域投影所述用户针对书本上指定区域所提出问题的答案。

【技术特征摘要】
1.一种协助用户解决问题的交互方法，其特征在于，包括：采集用户的语音数据，对所述语音数据进行语音识别，识别出所述用户所提出的问题；在摄像区域内获取目标图像，对所述目标图像进行识别，识别出所述用户在书本上所指定的区域；结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案；在投影区域投影所述用户针对书本上指定区域所提出问题的答案。2.根据权利要求1所述的一种协助用户解决问题的交互方法，其特征在于，所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案之前还包括：提示用户选择所述答案的显示模式，所述显示模式包括屏幕显示、投影显示；所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案具体包括：当用户选择所述答案的显示模式为投影显示时，在投影区域投影所述用户针对书本上指定区域所提出问题的答案。3.根据权利要求1所述的一种协助用户解决问题的交互方法，其特征在于，所述的在投影区域投影所述用户针对书本上指定区域所提出问题的答案之前还包括：根据所述答案对应的预设显示模式为投影显示时，将所述显示模式切换至所述投影显示。4.根据权利要求2或3所述的一种协助用户解决问题的交互方法，其特征在于，还包括：当所述显示模式为屏幕显示时，在显示屏显示所述用户针对书本上指定区域所提出问题的答案；当在显示屏显示的答案中含有关键词时，提示用户针对所述关键词相关知识选择投影显示；当用户针对所述关键词相关知识选择投影显示时，在投影区域投影所述用户针对所述关键词选择的相关知识。5.根据权利要求3所述的一种协助用户解决问题的交互方法，其特征在于，所述的根据所述答案对应的预设显示模式为投影显示时，将所述显示模式切换至所述投影显示之前还包括：统计分析各个用户针对每个学科答案所采用的显示模式，生成一张默认显示模式表，所述默认显示模式表包括每个学科答案的预设显示模式；或；用户自定义每个学科答案对应的显示模式，生成一张自定义显示模式表，所述自定义显示模式表包括每个学科答案的预设显示模式。6.根据权利要求1～3中任意一项所述的一种协助用户解决问题的交互方法，其特征在于，所述的结合用户所提出的问题以及在书本上所指定的区域，搜索出所述用户针对书本上指定区域所提出问题的答案具体包括：结合用户所提出的问题以及在书本上所指定的区域，分析出所述用户针对书本上指定...

【专利技术属性】
技术研发人员：饶盛添，徐杨，
申请(专利权)人：广东小天才科技有限公司，
类型：发明
国别省市：广东,44