一种基于图像和语音信息的在线答疑系统技术方案

本发明专利技术提出的一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统具有辨别发送模块，用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，经由服务器系统将答疑方的答疑信息发送至提问客户端。本发明专利技术提高了在线答疑系统中无法识别或无法答复的图片文件的回复准确率。

【技术实现步骤摘要】

本专利技术涉及在线答疑软件中的信息交互方面，特别是涉及语音和图像多媒体信息交互方式。
技术介绍
在线答疑软件中，一般包括提问客户端、服务器系统，提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端。这种方式大大节省了人力，但是在问题识别、数据库完善度、匹配算法存在一些不足，较低了回复的正确率，而且数据库的完善也加大了软件公司的人力投入。
技术实现思路
为了解决上述技术问题，本专利技术提出了一种基于图像和语音信息的在线答疑系统，提高了无法识别或无法答复的图片文件的回复准确率。本专利技术提出的一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。优选的，所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。优选的，所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。优选的，所述的答疑信息为文本文件。优选的，所述的答疑信息为增录有文本信息的图片文件。优选的，所述的答疑信息为音频文件。优选的，所述的答疑信息为将语音文件作为图片文件的扩展数据编码到图片文件中生成语音图片文件。本专利技术通过增加答疑客户端，通过将服务器系统无法识别或无法答复的图片文件即时发送至答疑客户端，经答疑人录入答疑信息后通过服务器系统反馈至提问客户端，大大提高了提问客户端发出的服务器系统无法识别或无法答复的图片文件的回复准确率；数据库增录模块的引入，实现了服务器系统中答案及解析数据库信息增录的众包模式，大大加快了服务器系统中答案及解析数据库完善的效率。【附图说明】图1示出本专利技术实施例的流程框图。【具体实施方式】下面结合附图详细说明本专利技术技术方案中所涉及的各个细节问题。应指出的是，所描述的实施例仅旨在便于对本专利技术的理解，而对其不起任何限定作用。本专利技术实施例的一种基于图像和语音信息的在线答疑系统，包括提问客户端、月艮务器系统、答疑客户端；提问客户端用于采集包含试题信息的图片文件并传送至服务器系统；服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端；所述服务器系统还具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。提问客户端和答疑客户端可以为电脑或手机，本实施例优选采用手机。常用的交互方式有文字答疑，图片答疑，也有少部分软件应用到了语音答疑。无论哪种答疑方式，都有其自身的局限性，文字答疑方式需要输入很多文字，比较繁琐，使用图片答疑方式，优点是比较简单，但缺点是不能很好的体现出答疑的思路，而单纯的语音答疑也不能完全解决问题，比如几何题等。为此，本实施例的答疑客户端具有文本文件录入功能、图片文件的文字增录功能、音频录入功能、将语音文件作为图片文件的扩展数据编码到图片文件的功能，因此，对应的答疑信息可以为文本文件、增录有文本信息的图片文件、音频文件、将语音文件作为图片文件的扩展数据编码到图片文件中生成语音图片文件任一种。本实施例的流程如图1所示，具体包括以下步骤:步骤1，提问人员通过提问客户端录入需要解答的试题图片文件，该图片文件可以为手机内存储的，也可以即时拍照获得；步骤2，提问人员利用提问客户端对需要解答的试题图片文件进行编辑和裁剪，实现一张图片只显示一道试题，然后将处理后的图片文件发送至服务器系统；步骤3，服务器系统接收提问客户端发送来的图片文件，并进行图片处理和信息提取；其中信息提取包括文字信息和图像元素；步骤4，判断图片处理和信息提取是否成功，若成功执行步骤5，否则执行步骤6 ;步骤5，判断依据提取信息进行试题答案和解析的信息匹配是否成功，若成功执行步骤8;否则执行步骤6;步骤6，服务器系统将无法识别或无法答复的图片文件即时发送至答疑客户端；步骤7，答疑人员通过答疑客户端查看服务器系统发送来的试题图片，通过答疑客户端录入答疑信息；答疑信息录入完毕后，答疑客户将录入的答疑信息发送至服务器系统；步骤8，服务器系统将答案和解析发送至提问客户端。以上所述，仅为本专利技术中的【具体实施方式】，但本专利技术的保护范围并不局限于此，任何熟悉该技术的人在本专利技术所揭露的技术范围内，可理解想到的变换或替换，都应涵盖在本专利技术的包含范围之内，因此，本专利技术的保护范围应该以权利要求书的保护范围为准。【主权项】1.一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统，提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端，其特征在于，所述的在线答疑系统还包括答疑客户端，所述服务器系统具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。2.如权利要求1所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述服务器系统包含试题答案及解析数据库以及数据库信息增录模块；所述的数据库增录模块用于将无法识别或无法答复图片文件与答疑客户端返回的答疑信息进行关联，并增录入试题答案及解析数据库。3.如权利要求2所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述数据库信息增录模块包括核检模块；所述核检模块用于显示、修改、确认新增录的图片文件及答疑信息。4.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为文本文件。5.如权利要求3所述的一种基于图像和语音信息的在线答疑系统，其特征在于，所述的答疑信息为增本文档来自技高网...

【技术保护点】
一种基于图像和语音信息的在线答疑系统，包括提问客户端、服务器系统，提问客户端用于采集包含试题信息的图片文件并传送至服务器系统，服务器系统用于识别由提问客户端传送来的图片文件的文字及图案要素、匹配生成试题答案及解析并自动传送至提问客户端，其特征在于，所述的在线答疑系统还包括答疑客户端，所述服务器系统具有无法识别或无法答复的问题的辨别发送模块；所述的辨别发送模块用于筛选无法识别或无法答复的图片文件，并将无法识别或无法答复的图片文件即时发送至答疑客户端；答疑客户端用于接收服务器系统发送来的图片文件，并进行答疑信息的录入，将录入的答疑信息发送至服务器系统，并经由服务器系统将答疑方的答疑信息发送至提问客户端。

【技术特征摘要】

【专利技术属性】
技术研发人员：陈李江，
申请(专利权)人：北京云江科技有限公司，
类型：发明
国别省市：北京;11