【技术实现步骤摘要】
本专利技术涉及终端
,尤其涉及手写信息的识别方法和装置。
技术介绍
目前,智能眼镜作为一种新兴的头部穿戴式设备,引起了人们越来越多地关注。由于此种设备通常不配备键盘或触摸屏等输入设备,所以人机交互一般只能通过语音和手势来进行;这一局限给智能眼镜在文本信息的录入方面造成了不便。相关技术中提供了一种允许用户使用任意的书写工具和书写平面进行手写笔迹的提取方法,其主要是通过摄像头跟踪书写工具的笔尖,从跟踪得到的笔尖的运动轨迹确定手写笔迹(即手写信息)。但是,实际应用中,用户书写过程中的提笔动作所导致的笔尖相对书写平面的垂直位移往往非常小,通过远距离的摄像头难以捕捉到提笔信息,而用户在提笔状态下的笔尖运动不产生笔迹,因此,这种方法提取出的手写笔迹的准确度不高。另外,现有的手机等智能设备在识别手写信息时,准确度也不高。因此,有必要提供一种能够准确提取出用户的手写笔迹的方案。
技术实现思路
针对上述现有技术存在的缺陷,本专利技术提供了一种手写信息的识别方法和装置,用以提高识别出的手写信息的准确度。根据本专利技术的一个方面,提供了一种手写信息的识别方法,包括:跟踪实时检测的书写焦点,拍摄局部书写区域;从拍摄的局部书写区域的图片中获取局部笔迹;拼接获取的局部笔迹,得到全局笔迹;根据得到的全局笔迹识别出用户的手写信息。所述书写焦点是根据视觉焦点确定的;或者,所述书写焦点是根据检
测到的书写工具的笔尖位置确定的。所述书写工具的笔尖位置是通过如下方法确定的:根据预先注册的书写工具的笔尖的形状,从实时拍摄的图片中识别出所述书写工具的笔尖;根据识别出的书写工具的笔 ...
【技术保护点】
一种手写信息的识别方法,其特征在于,包括:跟踪实时检测的书写焦点,拍摄局部书写区域;从拍摄的局部书写区域的图片中获取局部笔迹;拼接获取的局部笔迹,得到全局笔迹;根据得到的全局笔迹识别出用户的手写信息。
【技术特征摘要】
1.一种手写信息的识别方法,其特征在于,包括:跟踪实时检测的书写焦点,拍摄局部书写区域;从拍摄的局部书写区域的图片中获取局部笔迹;拼接获取的局部笔迹,得到全局笔迹;根据得到的全局笔迹识别出用户的手写信息。2.根据权利要求1所述的方法,其特征在于,所述书写焦点是根据视觉焦点确定的;或者,所述书写焦点是根据检测到的书写工具的笔尖位置确定的。3.根据权利要求2所述的方法,其特征在于,所述书写工具的笔尖位置是通过如下方法确定的:根据预先注册的书写工具的笔尖的形状,从实时拍摄的图片中识别出所述书写工具的笔尖;根据识别出的书写工具的笔尖,确定出所述书写工具的笔尖位置。4.根据权利要求1所述的方法,其特征在于,从拍摄的局部书写区域的图片中获取局部笔迹,包括:根据笔迹颜色从所述图片中提取出所述局部笔迹。5.根据权利要求4所述的方法,其特征在于,根据笔迹颜色从所述图片中提取出所述局部笔迹,包括:根据预先注册的书写工具的笔迹颜色,从所述图片中提取出所述局部笔迹;或者根据笔迹颜色与书写背景之间的颜色差异,从所述图片中提取出所述局部笔迹。6.根据权利要求5所述的方法,其特征在于,根据笔迹颜色与书写背景之间的颜色差异,从所述图片中提取出所述局部笔迹,包括:根据笔迹颜色与书写平面之间的颜色差异,对所述图片进行二值化处理,得到二值化图像;从所述二值化图像中确定出线条状的图像区域;提取所述线条状的图像区域作为所述局部笔迹。7.根据权利要求1所述的方法,其特征在于,所述拼接获取的局部笔迹,得到全局笔迹,包括:将当前帧和前一帧图片中提取出的局部笔迹进行比对,确定出当前帧图片的增量笔迹;将各帧图片的增量笔迹进行拼接,得到全局笔迹;将当前帧图片之前的所有前序帧图片的增量笔迹进行拼接,获得当前帧的前序拼接笔迹,将当前帧图片的增量笔迹与当前帧图片的前序拼接笔迹进行拼接,获得下一帧图片的前序拼接笔迹,重复前述步骤,直至拼接出全局笔迹。8.根据权利要求7所述的方法,其特征在于,所述根据得到的全局笔迹识别出用户的手写信息之后,还包括以下至少之一:将识别出的手写信息保存为不具有版面信息的文档文件;根据识别出的手写信息,生成具有版面信息的文档文件;将得到的全局笔迹保存到图片文件中;根据各帧图片的增量笔迹及其时序信息,生成视频文件。9.根据权利要求8所述的方法,其特征在于,所述具有版面信息的文档文件还根据下述至少一种信息生成:换行信息、删除标记、替换标记、重复特征符号、插入的内容、插入标记、位置调整标记、重点符号、和注释的内容。10.根据权利要求9所述的方法,其特征在于,在根据重复特征符号,
\t生成具有版面信息的文档文件之前,还包括:确定首次出现的重复特征符号,将首次出现的重复特征符号所标示的内容,复制到在后的重复特征符号所在位置处。11.根据权利要求1所述的方法,其特征在于,还包括:接收拍摄局部书写区域期间产生的音频数据;将所述音频数据和所述局部笔迹进行对应。12.根据权利要求11所述的方法,其特征在于,将所述音频数据和所述局部笔迹进行对应,包括:将所述音频数据和包含所述局部笔迹的文件对应保存;和/或保存所述音频数据和所述局部笔迹之间的对应关系。13.根据权利要求12所述的方法,其特征在于,在保存所述音频数据和所述局部笔迹之间的对应关系的情况下,所述方法还包括:在包含所述局部笔迹的文件中,对与所述局部笔迹对应的内容进行标记,所述标记用于表明存在与所述内容对应的音频数据。14.根据权利要求11所述的方法,其特征在于,在将所述音频数据和所述局部笔迹进行对应之后,还包括:根据所述音频数据和所述局部笔迹的对应关系,生成包含所述音频数据和所述局部笔迹的视频文件。15.根据权利要求11所述的方法,其特征在于,将所述音频数据和所述局部笔迹进行对应,包括:将当前帧的拍摄时间点、及其相邻帧图片的拍摄时间点之...
【专利技术属性】
技术研发人员:单煜翔,刘春晓,陈又新,
申请(专利权)人:北京三星通信技术研究有限公司,三星电子株式会社,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。