一种基于书写的人机交互系统及方法技术方案

本发明专利技术提供一种基于书写的人机交互系统，包括可供书写的介质、电子终端设备、手写输入部件、用于对可供书写的介质进行定位的辅助定位装置，手写输入部件与电子终端设备通信连接，手写输入部件用于在可供书写的介质上进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将轨迹数据信息发送至电子终端设备，电子终端设备根据轨迹数据信息来匹配预设定区域并进行预设操作。还涉及一种基于书写的人机交互方法。本发明专利技术的基于书写的人机交互系统及方法，通过把原笔迹和结构化的区域关联对应起来，手写的同时完成纸张填写和软件录入操作，时效性强，可以边写边识别，节省操作时间。

【技术实现步骤摘要】
一种基于书写的人机交互系统及方法
本专利技术涉及人机交互
，尤其涉及一种基于书写的人机交互系统及方法。
技术介绍
现如今，在教育、医疗、物流、金融等需要明确责任以及签字的诸多文件生成过程里，智能终端的普及仍不能提供经济便捷的可替代解决方案。往往先录入，后打印，再签字然后分发是比较常见的流程，但受操作时间不够、不适合进行电脑操作、成本、不适合携带打印机等诸多限制，很多过程信息的记录方式还是选择在纸张等书写介质手动勾选选项、填写内容以及签字，纸张留存、复写、扫描、录入电脑这几个步骤常常并存，保存纸张等介质可能因为潮湿，变色失效；复写可能因为力度或复写纸的褪色导致模糊；扫描文件为图像，可能因不同笔迹时间不同而失去填写时间，即便进行了手写文字OCR识别仍然不能保证准确率，不利于统计和内容检索，图像扫描之后进行图像识别，不能同步读取；打孔纸带作为早期计算机的交互方式不具备可读性。誊抄录入电脑不但时效性低，费时费力，还容易出错，便利性不高。也有采用答题卡式交互方式的情形，但存在答题卡和试卷分离的缺点，并且需要答题卡进行机器识别，还需要特殊的笔并且不能同时进行上下文阅读。
技术实现思路
鉴于现有技术的现状，本专利技术的目的在于提供一种基于书写的人机交互系统及方法，实现在手写的同时完成纸张等介质填写和软件录入操作，同时生成手写文件和结构化记录，时效性强，可以边写边识别，节省操作时间。为实现上述目的，本专利技术的技术方案如下：一种基于书写的人机交互系统,包括：可供书写的介质；辅助定位装置，用于对可供书写的介质进行定位；电子终端设备；手写输入部件，所述手写输入部件与所述电子终端设备通信连接，所述手写输入部件用于在所述可供书写的介质上进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将所述轨迹数据信息发送至所述电子终端设备，所述电子终端设备根据所述轨迹数据信息来匹配预设定区域并进行预设操作。优选地，所述可供书写的介质表面还设置有印刷勾选项或/和手写区域表格，所述电子终端设备包括有与所述印刷勾选项或/和手写区域表格相对应的预设定区域数据库，所述轨迹数据信息能够对应填充进所述预设定区域数据库，所述预设定区域数据库能够用于所述轨迹数据信息的存储和查询。优选地，所述电子终端设备还包括OCR转换器，所述OCR转换器用于将所述轨迹数据信息转化为文字信息并填写到所述预设定区域数据库的对应区域。优选地，所述手写输入部件包括有用于检测书写压力的压力传感器，所述手写输入部件为利用电磁、超声、红外中的至少一种笔迹坐标测量工具技术而获取痕迹的笔。优选地，所述电子终端设备为电脑、手机或平板电脑，所述手写输入部件具有笔尖和用于书写的墨水。还涉及一种基于书写的人机交互方法，包括以下步骤：S1、将手写输入部件与电子终端设备建立通信连接；S2、采用辅助定位装置对可供书写的介质进行定位，电子终端设备依靠辅助定位装置将预设定区域与可供书写的介质统一坐标系；S3、采用手写输入部件在可供书写的介质表面进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将所述轨迹数据信息发送至电子终端设备；S4、所述电子终端设备根据轨迹数据信息来匹配预设定区域并进行预设操作。进一步地，当所述轨迹数据信息为勾选项时，步骤S4中进行预设操作包括：所述电子终端设备识别轨迹并计算勾选项区域内的轨迹面积；将勾选项区域内的轨迹面积与勾选项区域的面积进行比较，当勾选项区域内的轨迹面积所占勾选项区域的面积之比大于等于预设值时，则勾选项的状态为选中，所述电子终端设备将预设定区域数据库的对应填充字段状态由off改为on。进一步地，当所述轨迹数据信息为手写文字时，步骤S4中进行预设操作包括：所述电子终端设备将所述轨迹数据信息填写到预设定区域数据库的对应区域。进一步地，当所述轨迹数据信息为手写文字时，步骤S4中进行预设操作包括：所述电子终端设备还将所述轨迹数据信息通过OCR识别转化为文字信息并填写到预设定区域数据库的对应区域。进一步地，所述预设定区域为结构化的区域模型。本专利技术的有益效果是：本专利技术的基于书写的人机交互系统及方法，通过把原笔迹和结构化的区域关联对应起来，手写的同时完成纸张等介质填写和软件录入操作，同时生成手写文件和结构化记录，并能获得书写时间，时效性强，可以边写边识别，节省操作时间。无需屏幕显示，就可以在纸张介质上类似触摸屏对软件进行操作，书写的同时生成电脑操作输入；不需要面对电脑屏幕，也能对特定软件进行对应区域的勾选或者标记、点击、转换、自定义等操作。可以书写人眼可以阅读的文件或问卷，并自动生成相应的电脑记录或操作：可读性强，避免了答题卡和试卷分离的缺点，不需要打印机或扫描仪可以保证电脑记录和介质的一致性，避免抄录错误。实现了在完成纸张介质文件的同时生成对应的电脑可识别的操作，在电子终端设备中进行准确的结构化录入、检索、统计，可在电子终端设备中生成可供检索选项并追溯原始痕迹以及书写时间。附图说明图1为本专利技术一实施例的基于书写的人机交互方法流程图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例对本专利技术的基于书写的人机交互系统及方法进行进一步详细说明。应当理解，此处所描述的具体实施例仅用于解释本专利技术，并不用于限定本专利技术。本专利技术一实施例的基于书写的人机交互系统包括：可供书写的介质、电子终端设备、手写输入部件、用于对可供书写的介质进行定位的辅助定位装置。其中，电子终端设备可为电脑、手机或平板电脑(pad)，可以通过电子终端设备来显示和运算。手写输入部件与电子终端设备通信连接，手写输入部件与电子终端设备优选无线通信方式，手写输入部件用于在可供书写的介质上进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将软件可读的轨迹数据信息发送至电子终端设备，电子终端设备根据所述轨迹数据信息来匹配预设定区域并进行预设操作。介质笔迹记录优选为在书写同时产生留存于介质上并长期的不需要其他设备辅助可见的笔迹记录。介质笔迹记录可为可供书写的介质上的笔迹。较佳地，手写输入部件具有笔尖和用于书写的墨水。可供书写的介质可为纸张。手写输入部件包括有用于检测书写压力的压力传感器，当用户通过手写输入部件书写的时候，压力传感器检测到书写的压力，手写输入部件将压力传感器检测到的压力发送至电子终端设备，电子终端设备根据压力大小判断是否开始书写。例如，压力传感器检测到书写的压力达到设定压力时即可判定手写输入部件处于书写状态，开始采集笔尖的轨迹数据，同时生成软件可读的轨迹数据信息并发送至电子终端设备。手写输入部件为利用电磁、超声、红外中的至少一种笔迹坐标测量工具技术而获取痕迹的笔。利用应用了电磁、超声、压感、红外等技术可获取痕迹的笔，通过电磁、超声或光学等笔迹坐标测量工具来获取笔尖的轨迹数据信息。本实施例中，电子终端设备本身具备或者额外提供辅助定位装置，辅助定位装置可为定位纸张的夹具或辅助限位纸张装置。优选地，可供书写的介质表面还设置有印刷勾选项或/和手写区域表格，电子终端设备包括有与印刷勾选项或/和手写区域表格相对应的预设定区域数据库；轨迹数据信息能够对应填充进预设定区域数据库，预设定区域数据库能够用于轨迹数据信息的存储和查询。预设定区域数据库亦即预设定区域的数据库本文档来自技高网...

【技术保护点】
一种基于书写的人机交互系统,其特征在于，包括：可供书写的介质；辅助定位装置，用于对可供书写的介质进行定位；电子终端设备；手写输入部件，所述手写输入部件与所述电子终端设备通信连接，所述手写输入部件用于在所述可供书写的介质上进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将所述轨迹数据信息发送至所述电子终端设备，所述电子终端设备根据所述轨迹数据信息来匹配预设定区域并进行预设操作。

【技术特征摘要】
1.一种基于书写的人机交互系统,其特征在于，包括：可供书写的介质；辅助定位装置，用于对可供书写的介质进行定位；电子终端设备；手写输入部件，所述手写输入部件与所述电子终端设备通信连接，所述手写输入部件用于在所述可供书写的介质上进行书写，在书写的同时生成介质笔迹记录和软件可读的轨迹数据信息并将所述轨迹数据信息发送至所述电子终端设备，所述电子终端设备根据所述轨迹数据信息来匹配预设定区域并进行预设操作。2.根据权利要求1所述的基于书写的人机交互系统，其特征在于，所述可供书写的介质表面还设置有印刷勾选项或/和手写区域表格，所述电子终端设备包括有与所述印刷勾选项或/和手写区域表格相对应的预设定区域数据库，所述轨迹数据信息能够对应填充进所述预设定区域数据库，所述预设定区域数据库能够用于所述轨迹数据信息的存储和查询。3.根据权利要求2所述的基于书写的人机交互系统，其特征在于，所述电子终端设备还包括OCR转换器，所述OCR转换器用于将所述轨迹数据信息转化为文字信息并填写到所述预设定区域数据库的对应区域。4.根据权利要求1-3任一项所述的基于书写的人机交互系统，其特征在于，所述手写输入部件包括有用于检测书写压力的压力传感器，所述手写输入部件为利用电磁、超声、红外中的至少一种笔迹坐标测量工具技术而获取痕迹的笔。5.根据权利要求1-3任一项所述的基于书写的人机交互系统，其特征在于，所述电子终端设备为电脑、手机或平板电脑，所述手写输入部件具有笔尖和用于书写的墨水。6.一种基于书写的人机交互方法，其特...

【专利技术属性】
技术研发人员：陈新昆，
申请(专利权)人：陈新昆，
类型：发明
国别省市：山东,37